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序言 


大 数据 正在 席卷 全 球 。 这 个 话题 如 今 频繁 见 诸 各 种 会 议 、 专 闭 、 
论文 和 企业 的 讨论 中 。 这 当然 古事 出 有 因 的 :对 以 往 深 不 可 测 的 大 量 
数据 进行 挖掘 ， 从 而 发 现 趋势 甚至 预测 未 来 ， 这 样 的 想法 的 确 非常 具 
有 了 吸引 力 。 但 古 正 如 这 些 会 议 、 专 着、 论文 和 商业 计划 中 所 前 述 的 ， 
和 弄 明日 如 何 处 理 巨 大 体 量 的 数据 ， 并 使 其 发 挥 更 好 的 作用 并 不 是 一 件 
简单 的 事情 。 


我 们 将 天 数据 定义 为 人 或 物 与 数字 网 络 世 界 之 间 相 互 作用 而 产生 
的 信息 集合 。 它 可 以 是 数 年 间 采 集 的 关于 一 个 人 的 单一 变量 的 数据 ， 
也 可 以 古 在 某 一 瞬间 采集 的 天 于 数 亿 人 的 多 变量 数据 。 大 数据 可 能 涉 
AOA TALS > STRAY Era eA, tH BE ek = PE 
间 的 组 合 。 


由 于 各 种 技术 因素 的 汇集 ， 大 数据 已 经 成 为 我 们 现代 世界 的 一 个 
特征 。 高 性 能 的 移动 互联 智能 设备 就 在 你 的 口袋 中 采集 数据 、 进 行 运 
算 ， 然 后 发 送 给 远程 服务 器 。 云 计算 和 日 益 增 长 的 高 密度 数据 存储 设 
备 ， 为 一 切 信息 提供 了 安 呈 之 所 。 并 且 ， 流 处 理 范 式 使 数据 可 以 通过 
分 布 式 设备 进行 处 理 。 一 些 针 对 大 规模 数据 集 设 计 的 编程 模型 ， 如 
MapReduce 以 及 开源 的 Hadhoop 的 出 现 ， 使 人 们 了 解 即 将 到 来 的 信息 流 
是 可 能 的 。 


大 数据 被 定义 为 我 们 日 章 活 动产 出 的 数字 记录 或 留 下 的 数字 足 
迹 ， 它 是 我 们 生活 的 元 数据 。 一 些 人 害怕 这 会 市 来 一 个 没有 隐私 的 世 
A: 企业 对 我 们 的 了 解 比 我 们 上 自己 还 多 ， 政 府 可 以 监控 那些 它们 认为 
危险 的 人 。 另 一 些 人 则 认为 大 数据 是 数据 库 这 抹 彩 虹 末 端的 一 缸 金 


子 ， 是 抓 住 下 一 波 信 息 技 术 趋 势 的 机 遇 。 他 们 还 相信 ， 从 这 些 全 世界 
人 们 日 浓 生 活 中 产生 的 海量 数据 中 可 以 获得 有 葵 的 东西 。 


作为 本 书 作者 ,我们 是 技术 专家 ， 属 于 后 者 。 我 们 认为 ， 如 果 从 
负责 任 的 、 审 慎 的 以 及 对 环境 敏感 的 角度 来 看 ， 大 数据 可 以 帮助 改善 
公共 卫生 、 引 寻 个 人 更 好 地 决策 、 促 进 知识 的 共 闻 以 及 提升 创新 速 
度 。 大 数据 的 时 代 已 经 来 临 ， 而 且 看 起 来 也 不 会 很 快 结束 。 因 此 ， 保 
证 个 人 自由 和 隐私 不 被 侵犯 ,告知 消费 者 谁 在 什么 时 间 、 以 什么 为 目 
的 获得 了 他 们 的 数据 束 很 重要 。 我 们 相信 ， 在 小 心 前 慎 进行 数据 采集 
的 前 提 下 ， 大 数据 就 可 以 被 用 来 设计 成 更 好 的 系统 ， 以 及 一 个 可 能 的 
更 好 的 世界 。 我 们 采用 了 一 个 被 称 为 “现实 挖掘 ”(Reality Mining) 的 
方式 ， 不 仅 对 大 数据 进行 分 机 ， 而 且 确保 分 析 能 够 反映 参与 人 的 现实 
状况 ， 同 时 在 整个 过 程 中 始终 你 持 谨 慎 的 数据 采集 态度 。 


本 书 的 目标 是 探讨 大 数据 可 能 的 积极 方面 ， 特 别 征 展现 如 何 利用 
对 现实 的 挖掘 来 设计 更 好 的 社会 系统 。 这 意味 着 本 书 所 介绍 的 理念 ， 
将 会 超越 那些 简单 的 描述 性 分 析 ， 如 计 步 数据 的 柱状 图 等 。 我 们 所 探 
讨 的 是 针对 一 些 可 视 化 的 数据 表达 ， 比 如 犯罪 行为 或 疾病 又 发 的 空间 
分 布 图 等 ， 如 何 将 其 转化 为 具有 实际 操作 意义 的 行动 或 政策 。 我 们 还 
考虑 了 可 以 使 用 全 球 的 匿名 数据 系统 的 构想 。 提 出 诸如 “如 何在 缺乏 公 
共 卫 生 资源 的 发 展 中 国家 ， 配 置 疾 病 传染 的 预警 系统 ? ”这 样 的 问题 。 
根本 上 ， 我 们 希望 探寻 如 何 利 用 大 数据 让 人 们 的 生活 变 得 更 加 美好 。 


本 书 分 为 5 个 部 分 ， 每 个 部 分 分 别 关 注 不 同 的 数据 采集 太 度 ， 大 数 
据 的 内 在 挑战 和 机 遇 。 大 致 同 得 尔 斯 ' 伊 姆 斯 和 荞 ' 伊 姆 斯 夫妇 在 1977 年 
制作 的 电影 短片 《十 的 力量 》 中 分 别 观察 了 宇宙 的 极 大 部 分 和 极 小 部 
分 一 样 ， 本 书 对 大 数据 的 讨论 也 是 从 小 样本 产 增 到 较 大 的 样本 。 


本 书 的 现实 挖掘 旅 程 将 从 个 体 层 面 开始 ， 即 单个 人 所 产生 的 数据 
和 应 用 于 单个 人 的 数据 。 接 着 ， 我 们 升级 到 邻里 和 组 织 层 面 ， 再 扩展 
到 城市 层面 ， 之 后 苹 国家 层面 ， 最 后 到 达 全 球 层面 。 诚 然 ， 这 样 的 分 
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面 获取 的 大 数据 也 可 以 应 用 于 其 他 不 同 层 面 。 我 们 适时 地 提 及 了 一 些 
这 类 多 样 化 应 用 的 例子 。 不 过 ，5 个 层次 的 结构 更 易 把 握 ， 也 更 有 助 于 
我 们 思考 在 大 数据 获取 和 利用 过 程 中 面临 的 种 种 挑战 。 


这 5 个 部 分 又 分 别 各 有 两 草 。 每 个 部 分 的 第 一 章 详细 描述 了 该 层面 
的 数据 采集 种 类 、 数 据 采 集 方式 ， 以 及 读者 在 可 能 的 情况 下 可 以 如 何 
获得 这 些 数 据 ， 第 二 章 则 前 释 在 这 些 数据 的 基础 上 ， 已 经 建立 或 者 我 
们 相信 可 以 建立 的 应 用 和 系统 。 


因此 ， 每 部 分 的 第 一 章 作为 同 导 ， 市 领 读者 对 可 以 挖掘 的 多 种 数 
据 类 型 以 及 可 能 的 获取 途径 进行 思考 。 这 些 途 径 可 能 是 编写 一 个 于 机 
应 用 程序 来 采集 使 用 者 的 睡眠 数据 ， 或 是 订阅 服务 商 提 供 的 航班 数 
据 ， 又 或 是 基于 谷歌 进行 检索 的 数据 分 析 。 有 些 多 数 人 不 太 容 易 获取 
的 数据 ， 比 如 移动 电话 的 通话 记录 ， 我 们 也 提供 了 如 何 有 限 获 取 或 者 
寻找 其 他 可 能 来 蔡 代 实际 数据 的 建议 。 


在 充分 理解 哪些 数据 类 型 可 以 被 挖掘 之 后 ， 我 们 接着 讨论 可 以 使 
用 这 些 数 据 进 行 现实 挖掘 的 程序 。 有 些 系统 较为 成 熟 ， 一 些 则 还 处 于 
早期 阶段 ， 其 他 则 尚未 被 开发 出 来 。 我 们 在 本 书 中 仅 提 供 了 一 小 部 分 
可 用 程序 的 信息 ， 同 时 也 展现 了 机 明之 所 在 。 


隐私 问题 是 大 数据 采集 和 使 用 过 程 中 的 大 麻烦 ， 在 本 书写 作 过 程 
中 ， 我 们 曾 考虑 用 单独 的 一 章 来 讨论 它 ， 但 最 终 放弃 了 这 个 想法 。 工 
程 师 和 企业 往往 在 最 初 的 产品 构想 已 经 基本 完成 时 ， 才 开始 考虑 用 户 
或 客户 的 隐私 问题 。 这 样 的 话 ， 隐 私 特性 便 成 为 几 近 完成 的 主要 设计 
的 添 头 。 我 们 不 希望 这 本 书 也 变 成 这 样 。 我 们 认为 ， 人 们 对 隐私 的 期 
望 和 分 至 数据 的 意愿 度 应 该 从 一 开始 束 被 考虑 ， 并 烙 在 每 一 个 应 用 程 
序 或 产品 设计 中 。 故 依据 需要 ， 我 们 通过 探讨 隐私 问题 、 人 们 对 数据 
采集 和 共享 方式 的 了 解 程度 、 人 们 对 这 些 方式 的 适应 度 (适应 度 往往 


受到 多 种 因素 的 影响 而 不 断 变动 ) 以 及 在 注重 隐私 的 前 提 下 开发 应 用 
来 反映 这 种 情绪 。 


需要 特别 指出 的 是 ， 本 书 没有 涉及 特定 的 分 析 方 法 论 ， 而 是 将 这 
些 留 给 了 其 他 文章 、 论 文 和 讨论 。 大 数据 技术 还 在 不 断 发 展 ， 现 实 控 
掘 的 实践 者 们 很 快 会 发 现 将 有 更 多 分 析 技术 可 用 于 他 们 的 数据 集 。 在 
本 书 中 我 们 没有 排斥 某 些 特定 的 数据 和 应 用 程序 的 分 析 ， 而 是 选择 育 
焦 于 更 宽泛 的 现实 挖掘 问题 : 如 何 安 全 、 不 侵犯 隐私 而 又 有 意义 地 进 
行 数据 采集 ? 如 何 设计 实用 、 以 人 为 本 的 系统 ? 


关于 大 数据 的 很 多 讨论 都 围绕 挖掘“ 知识 ”这 一 主题 ， 似 乎 “ 知 
识 ” 丈 是 人 们 唯一 能 够 且 应 该 从 中 获得 的 。 本 书 从 另 一 个 视角 来 看 行 
数据 ， 在 描述 性 分 析 的 基础 上 前 进 了 一 大 步 ， 从 知识 走 同行 动 。"“ 现 实 
挖掘? 是 为 了 使 用 大 数据 来 开发 系统 ， 从 而 对 从 个 体 到 全 球 的 所 有 层面 
都 产生 积极 影响， 它 将 提升 我 们 的 生活 品质 ， 让 我 们 变 得 更 健康 ， 并 
让 我 们 与 70 亿 地 球 邻居 们 一 起 生活 得 更 加 类 好 、 智 能 和 幸福 。 


:手机 一 旦 掌握 了 你 的 使 用 习惯 ， 它 就 可 以 帮助 你 安排 行程 、 提 : 
: 供 活动 建议 ， 或 者 在 没有 手动 设置 的 情况 下 发 出 提醒 。 它 可 以 调整 : 
: 使 用 模式 以 适应 多 样 的 环境 ， 比 如 在 影院 时 自动 关闭 手机 铃声 ， 电 : 
; 影 结束 后 再 自动 打开 。 熟 知 你 生活 习惯 的 手机 还 可 以 为 你 推荐 酒 : 
; 吧 ， 那 里 的 常客 们 跟 你 有 着 相似 的 爱好 ， 或 者 刚好 在 你 想 要 尝试 去 ; 
; 一 家 新 餐厅 也 晚 夏 时间 你 推荐 一 个 正 合 你 意 的 餐馆 。 | 


REALITY 
MINING 

Using Big Data 

to engineer a Better World 


第 一 章 
智能 手机 、 传 感 器 和 生命 记录 


如 今 ， 采 集 我 们 目 喘 的 众多 日 常数 据 已 相当 容易 ， 各 种 各 样 的 技 
术 通 过 移动 电话 、 软 件 、 皮 肤 电 流 监控 器 、 可 穿戴 摄像 头等 ， 追 味 着 
我 们 的 习惯 、 人 位置、 消费、 路线 、 社 交 以 及 情绪 。 的 确 ， 因 我 们 日 第 
行为 而 产生 的 “数据 排放 ”*”， 其 释放 和 捕 近 的 便利 性 给 研究 人 员 们 市 来 
了 新 的 机 遇 。 不 仪 使 研究 者 可 以 更 深入 地 了 解 这 些 行为 ， 还 有 助 于 他 
们 利用 这 些 观察 来 设计 更 适应 人 们 实际 行为 的 系统 。 


传 感 人 、 软 件 以 及 它们 在 我 们 生活 中 的 广泛 存在 古 推动 这 一 趋势 
的 重要 因素 ， 而 一 类 重要 的 传 感 副 下 植 入 在 如 今 的 移动 电话 中 。 随 着 
移动 电话 的 高 度 普 及 ， 它 成 为 全 球 几乎 所 有 人 的 必需 品 ， 它 已 经 当 仁 


不 让 地 成 为 采集 个 体 数 据 的 最 基本 工具 。 到 2012 年 年 成 ， 全 球 已 有 近 
60 亿 个 移动 电话 客户 端 。 即 使 定 最 简单 的 手机 ， 每 次 与 通信 基站 交换 
言 号 时 ， 也 会 提供 其 使 用 者 的 位 置信 息 。 移 动 电话 最 初 只 是 通信 工 
具 ， 如 今 已 逐渐 成 为 逆 配 了 多 种 附加 传 感 套 的 随 吴 计算 设备 。 这 些 附 
加 姜 置 包括 可 以 监测 身体 活动 的 加 速 仪 、 可 以 测度 我 们 位 置 的 GPS 
(全 球 定位 系统 ) 心 片 、 蓝 牙 模块 等 近 距 离 元 线 传输 协议 、 可 以 推断 
附近 情况 的 麦克 风 等 ， 甚 至 简单 的 通话 记录 也 可 以 用 来 衡量 我 们 的 社 


交 进 展 。 


手机 一 旦 掌握 了 你 的 使 用 习惯 ， 它 就 可 以 帮助 你 安排 行程 、 提 供 
活动 建议 ， 或 者 在 没有 手动 设置 的 情况 下 发 出 提醒 。 它 可 以 调整 使 用 
模式 以 适应 多 样 的 环境 ， 比 如 在 影院 时 目 动 关闭 手 机 铃声 ， 电 影 结 束 
后 再 目 动 打开 。 熟 知 你 生活 习惯 的 手机 还 可 以 为 你 推荐 酒吧 ， 那 里 的 
常客 们 跟 你 有 着 相 似 的 爱好 ， 或 者 刚好 在 你 想 要 壬 试 去 一 家 新 餐厅 吃 
晚饭 时 问 你 推荐 一 个 正 合 你 意 的 餐 吧 。 


移动 电话 中 的 数据 还 能 够 提供 人 们 的 实时 位 置 移动 信息 ， 在 人 研究 
站 疾 或 流感 这 类 疾病 时 ， 它 可 能 成 为 建立 传染 路 径 模 型 的 关键 数据 。 
男 外 ， 人 研究 人 员 还 发 现 ， 通 过 手机 上 合适 的 传 感 副 和 软件 捕捉 用 户 的 
行为 变化 和 谈话 模式 ， 可 以 比 其 他 医学 检查 更 早 发 现 某 些 疾病 的 预 
兆 ， 如 抑郁 症 或 由 金森 综合 征 。 在 使 用 个 人 数据 让 和信 们 的 生活 变 得 更 
加 轻松 和 健康 方面 ， 现 实 挖掘 拥有 很 大 的 潜力 ， 这 些 只 是 几 个 仍 处 于 
早期 阶段 的 应 用 案例 。 


追踪 我 们 个 人 信息 的 不 仅仅 是 移动 电话 ， 我 们 的 个 人 计算 机 使 用 
记录 也 在 被 越 来 越 多 的 软件 监测 。 人 研究 人 员 推 出 ， 人 们 越 了 解 目 己 在 
某 些 网 页 或 者 电子 邮件 上 花费 了 多 少时 间 ， 束 越 容易 掌握 和 调整 日 钊 
效率 。 当 然 ， 由 于 移动 电话 变 成 了 空前 强大 的 计算 设备 ， 在 手机 上 人 退 
踩 人 们 应 用 程序 使 用 记录 的 软件 也 被 开发 出 来 。 将 这 些 软件 数据 与 通 


过 手机 传 感 絮 和 其 他 程序 采集 到 的 数据 放 在 一 起 ， 可 以 推断 出 很 多 个 
人 行为 信息 。 


除了 移动 电话 和 个 人 计算 机 之 外 ， 人 们 在 日 常生 活 、 运 动 或 是 睡 
觉 时 ， 也 越 来 越 多 地 主动 携 市 各 种 专用 传 感 设 备 ， 以 掌握 目 己 的 生理 
习惯 和 健康 状况 。 合 歌 眼 镜 ， 实 际 上 是 一 个 装配 了 小 型 显示 屏 、 摄 像 
头 、 麦 克 风 、 处 理 器 和 无 线 通 信 的 头 部 穿戴 系统 。 因 其 通过 连续 担 照 
和 摄像 的 方式 使 你 与 外 部 世界 保持 联系 并 记录 你 的 生活 而 广 受 关注 。 
更 为 普通 有 旦 不 显眼 的 计 步 器 和 睡眠 监测 仪 正在 获得 商家 的 关注 。 这 些 
设备 和 手机 上 模拟 类 似 功 能 的 应 用 程序 所 产生 的 数据 ， 可 以 精确 地 显 
示 一 个 人 的 喘 体 活动 状况 。 杀 眼看 到 这 些 数 据 可 以 激励 人 们 生活 得 更 
加 健康 。 近 年 来 ， 脸 谱 网 (Facebook) FIFE (Twitter) 这 些 社交 网 
站 的 日 益 流 行 ， 已 经 形成 一 个 庞大 的 个 人 数据 库 。 人 们 在 这 些 站 点 上 
进行 “状态 更 新 ”， 发 布 可 以 反映 其 生活 状态 的 短 消息 ， 回 答 诸如 “你 在 
做 什么 ?* 你 感觉 怎么 样 ? “你 周边 发 生 了 什么 ? “现在 有 什么 让 你 
感 兴趣 的 事情 ? ”这 样 的 问题 。 可 以 说 ， 状 态 更 新 在 某 种 意义 上 来 说 相 
当 于 用 户 对 一 个 社会 学 家 的 社会 调查 问卷 做 出 的 回答 。 


一 经 发 布 ， 这 些 状态 更 新 束 会 被 推送 给 社交 网 络 中 的 其 他 人 ， 在 
某 些 情况 下 还 是 在 线 公开 的 ， 可 以 被 任何 想 看 的 人 看 到 。 一 些 人 研究 人 
员 在 探索 根据 日 历 事件 和 位 置信 息 ， 目 动 进行 状态 更 新 的 方式 。 另 一 
些 人 则 试图 将 这 些 状 态 信 , 息 集中 解读 ， 已 有 软件 开发 者 编 出 一 些 价 单 
程序 来 分 析 这 些 内 容 。 这 些 程序 通常 将 特定 关键 词 进行 可 视 化 ， 依 据 
词汇 出 现 的 频率 设 定 字体 的 展示 大 小 。 通 过 这 种 方式 ， 人 们 可 以 大 致 
了 解 目 己 一 段 时 间 内 的 活动 和 感受 。 


越 来 越 多 的 人 开始 着迷 于 目 我 的 个 人 数据 ， 并 将 他 们 能 获得 的 所 
有 目 喘 信息 结合 起 来 ， 包 括 手机 通信 、 电 脑 使 用 、 生 物 传 感 器 、 摄 像 
或 手工 录入 数据 记录 等 。 这 种 极端 的 量化 和 编目 方式 号 古 所 请 的 “生命 


记录 ”。 尽管 这 种 方式 并 不 算 普 裔 ， 它 作为 一 种 更 好 地 了 解 目 喘 习 惯 的 
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工程 师 和 设计 师 推 动 了 生命 记录 的 发 展 ， 因 为 他 们 发 明了 让 人 更 
容易 进行 生命 记 孙 的 网 络 应 用 和 其 他 技术 工具 。 随 着 谷歌 眼镜 和 其 他 
生命 记录 工具 的 出 现 ， 更 重要 的 是 ， 这 些 工具 与 人 们 日 第 生活 结合 得 
更 加 紧密 ， 生 命 记录 对 普通 人 来 说 将 不 再 困难 。 这 种 活动 甚至 可 能 
服 社 会 成 见 ， 并 被 更 多 不 精通 拉 术 的 人 们 所 接纳 。 


在 本 章 中 ， 我 们 将 探讨 个 人 数据 可 以 通过 哪些 方式 被 采集 和 记 
孙 ， 包 括 不 易 察 觉 的 移动 电话 日 前 区 互 ， 以 及 更 具 目 的 性 的 电子 公 
告 ， 如 状态 更 新 信息 等 。 我 们 还 将 讨论 ， 个 人 和 企业 在 数据 采集 和 分 
析 过 程 中 都 需要 时 刻 铭记 的 隐私 问题 ， 以 及 目前 在 实践 中 的 隐私 保护 
方法 。 
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2004 年 秋天 ， 太 省 理工 学 院 开展 了 一 个 研究 项 目 ， 癌 100 名 新 生 和 
在 校 学 生 提 供 预 装 定制 版 ContextPhones 程 序 的 诺基亚 6600 型 手机 。 该 
程序 可 以 追踪 手机 连接 的 通信 基站 代码 、 应 用 使 用 情况 以 及 手机 是 否 
内 置 或 是 在 充电 等 状态 信息 。 在 9 个 月 的 时 间 里 ， 该 研究 项 目 记录 了 30 
万 小 时 的 用 户 数据 。 


所 有 的 参与 者 都 被 告知 了 电话 记录 程序 的 功能 ， 并 被 要 求 签 嗜 同 
意 书 ,签署 意 味 厦 他 们 知道 目 己 的 手机 采集 的 是 什么 数据 。 参 与 者 可 
以 在 任何 时 候 抹 去 他 们 目 己 的 数据 并 关闭 记录 功能 。 由 于 和 人 研究 无 
天 ， 参 与 者 的 手机 号 码 作 为 附加 的 隐私 保护 措施 ， 此 次 研究 中 将 其 通 
过 单 向 函数 (MDS) 生成 唯一 代码 ， 并 无 法 被 逆 运 算得 到 原始 手机 号 
码 。 


诺基亚 6600 手 机 本 质 上 是 一 组 被 参与 者 们 几乎 一 直 随身 携带 的 传 
感 絮 。 过 去 很 多 年 里 ， 大 学 和 企业 的 研究 人 员 通 常 使 用 放置 在 房间 、 
办 公 室 或 是 设备 包 中 的 传感器 ， 来 采集 个 人 的 位 置 、 与 其 他 人 的 位 置 
关系 、 物 理 位 移 甚 至 是 周边 环境 声音 的 片断 等 信息 。 装 有 红外 线 或 
RFiD (无 线 射频 识 别 发 生 器 ， 的 智能 胸卡 被 设计 为 可 以 识别 其 他 同类 
痛 置 ， 写 们 被 用 来 研究 工作 场所 的 协作 以 及 会 议 中 的 社交 。 这 些 传 感 
右 和 智能 标记 系统 相 比 过 去 的 大 包 传 感 器 和 电路 板 已 经 有 了 很 大 的 改 
善 ， 但 还 是 有 些 尝 重 。 


尽管 在 人 喘 上 装 传 感 磊 的 方法 有 很 多 ， 但 这 个 庄 基 亚 6600 的 现实 
挖掘 项 目 是 独特 的 ， 因 为 这 是 有 史 以 来 第 一 次 ， 全 究 人 员 以 可 扩展 的 
方式 退 踪 人 研究 对 象 的 位 置 、 社 会 交往 和 习惯 。 项 目 进 行 时 ， 已 经 有 数 
以 千 万 计 的 手机 具备 运行 诺基亚 6600 上 所 安装 的 超级 监测 软件 的 性 
能 。 这 个 项 目 证 明了 手机 可 以 成 为 可 靠 、 可 扩展 的 沁 在 计算 工具 ， 可 
以 获取 比 以 往 任 何 时 候 都 多 的 行为 数据 。 在 行为 研 完 方面 ， 过 去 大 多 
数 社会 学 家 采用 调研 的 方法 所 获得 的 信息 ， 在 规模 和 精确 度 上 都 无 法 
与 移动 电话 采集 的 数据 相提并论 。 


选择 详 基 亚 6600 型 手机 是 因为 它 装备 了 塞 班 S60 系 统 软件 平台 ， 该 
手机 可 以 运行 由 赫 尔 闻 基 大 学 开发 的 定制 版 Context 软 件 ， 用 以 记录 个 
人 手机 的 所 有 状态 : 无 论 是 拨打 一 个 电话 还 是 充电 乃至 闲置 状态 。 这 
款 手机 备 有 6MB GEE) 的 内 存 ， 并 可 以 使 用 最 大 32MB 的 多 媒体 
闪存 卡 进行 容量 扩展 。 手 机 没有 任何 锁定 功能 ， 并 且 可 以 使 用 任何 一 
家 全 球 通 信 系 统 的 移动 电话 运营 商 ， 如 T -Mobile (德国 电信 ) ,AT&T 
(美国 电话 电报 公司 ) 和 Cingular 公 司 (已 被 AT&T 收 购 ) 。 定 制 的 应 
用 程序 可 以 通过 通用 分 组 无 线 服务 数据 网 络 、 蓝 牙 、 存 储 卡 或 红外 端 
口 等 方式 安装 到 手机 上 。 


手机 可 以 持续 不 断 地 扫描 和 记录 和 它 周 边 一 定 范围 内 的 蓝牙 设备 。 
蓝牙 是 一 种 频率 在 2.4 兆 ~2.48 兆 赫 歼 之 间 的 无 线 通信 协议 ， 在 1994 年 由 


爱立信 公司 开发 ， 并 于 1998 年 发 布 ， 用 以 蔡 代 设备 间 的 串口 连接 方 
式 。 每 个 开启 监 牙 的 设备 都 具有 “设备 被 发 现 ” 能 力 ， 它 会 寻找 并 发 现 
周边 5~10 米 范围 内 其 他 蓝牙 设备 的 媒体 访问 控制 地 址 。 


该 研究 项 目 使 用 了 一 个 修改 版 本 的 BlueAware 应 用 程序 (移动 电话 
版 MIDP2-Java) ， 对 发 现 的 蓝牙 设备 识别 地 址 在 邻近 的 服务 器 上 进行 
VERA BRIG (多 。 因 为 如 果 使 用 标准 版 本 的 BlueAware 软 件 进行 持 
续 的 扫描 和 记录 的 话 ， 手 机 电池 会 在 18 个 小 时 内 耗 尽 ， 所 以 修改 版 本 
将 扫 朱 时 间 改 为 每 隔 5 分 钟 一 次 ， 从 而 使 手机 续航 时 间 增 至 36 个 小 时 。 
当 传 感 絮 六 在 移动 电话 或 者 其 他 使 用 电池 的 设备 上 时 ， 堵 虚 传 感 紫 的 
质 源 需求 和 维持 其 持续 扫描 的 其 他 可 行 性 就 至 头 重 要 。 


与 BlueAware 软 件 类 似 的 一 个 软件 是 Bluedar， 是 为 装置 在 研究 参 
与 者 的 社交 聚会 场所 的 设备 而 研发 的 。Bluedar 对 可 发 现 设备 进行 持续 
扫描 ， 并 将 蓝牙 设备 识别 地 址 通过 一 个 802. 11b 的 无 线 网 络 上 传 到 服务 
右上 。 设 备 具 有 一 个 包含 了 第 二 代 蓝 牙 心 斤 的 核心 ， 可 以 被 XPort 型 网 
络 服务 器 所 控制 ， 并 能 有 效 探测 识别 周边 25 米 范围 内 的 蓝牙 设备 。 


除了 蓝牙 扫描 功能 ， 详 基 亚 6600 还 能 够 持续 记录 通信 基站 的 识别 
号 码 。 利 用 通信 基站 识别 码 获 得 用 户 定 位 数据 已 有 大 量 的 相关 人 研究， 
但 是 通过 这 种 方式 获得 精确 的 位 置信 息 比 较 困难 ， 因 为 手机 可 以 连接 
到 几 英 里 远 的 通信 基站 上 ， 而 在 城区 时 可 连接 的 范围 内 常常 会 有 数 1 


个 通信 基站 。 


在 这 项 研究 中 ， 当 人 研究 对 象 在 某 一 位 置 俘 留 的 时 间 足 够 长 ， 足 以 
提供 一 个 预 佑 的 信和 号 塔 概率 密度 分 布 钞 数 时 ， 那 么 束 可 以 获得 相对 高 
精度 的 位 置 。 由 于 多 种 条 件 的 差异 ， 包 括 信 号 强度 和 网 络 状 况 等 ， 手 
机 在 同一 位 置 不 同时 段 可 能 分 别 与 不 同 的 信号 塔 通 信 。 所 以 ， 在 一 段 
时 间 内 ， 手 机 可 能 连接 了 好 几 个 信号 塔 。 男 外 ， 手 机 位 置 的 细微 改 
变 ， 甚 至 都 会 引起 信号 塔 分 布 的 显著 变化 。 信 号 塔 识别 地 址 还 可 以 与 
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当然 ， 如 今 手机 已 经 可 以 通过 很 多 更 直接 的 方式 记录 用 户 位 置 。 
很 多 智能 手机 凌 配 了 GPS 心 片 ， 而 谷歌 和 Skyhook 等 公司 使 用 三 角 定 位 
技术 ， 来 弥补 通过 无 线 基站 信号 、 通 信 基 站 和 GPS 定位 不 足 (在 室内 
使 用 时 精准 度 不 足 ) 的 问题 。 但 对 于 普通 手机 来 说 ， 通 信 基 站 识别 依 
然 生 最 经 济 、 最 简单 也 是 最 可 靠 的 位 置 追 踩 技术 。 


在 麻 省 理工 学 院 这 个 基于 诺基亚 6600 的 研究 早期 阶段 ， 采 集 的 数 
据 和 被 存储 在 手机 有 限 的 内 存 中 ， 人 研究 者 需要 经 常 转 存 数据 ， 这 一 过 程 
需要 大 约 5 分 钟 ， 同 时 人 研究 人 员 还 可 以 升级 应 用 程序 。 然 而 由 于 一 个 月 
的 数据 量 就 有 5~10 兆 ， 一 部 分 数据 束 需 要 被 存储 在 手机 的 外 置 内 存 卡 
上 。 通 过 对 程序 在 存储 卡 写 和 人 数据 效率 的 改进 ， 数 据 转 存 的 需求 被 延 
长 至 数 月 一 次 。 到 后 期 ， 使 用 T-Mobile 作 为 服务 商 的 用 户 还 可 以 使 用 
有 限 的 互联 网 连接 将 数据 通过 电子 邮件 发 送 至 代理 服务 器 。 


最 后 ， 癸 究 参 与 者 还 完成 了 一 次 问卷 调查 ， 回 答 包 括 他 们 的 手机 
使 用 情况 、 日 常 行为 模式 、 对 麻 省 理工 学 院 的 满意 度 、 他 们 的 社交 圈 
以 及 工作 圈 等 问题 。 问 卷 的 最 后 一 个 问题 涉及 所 有 研究 参与 者 ， 要 求 
每 个 人 对 目 己 与 其 他 每 个 人 之 间 的 互动 频率 进行 打分 ， 并 确认 其 他 人 
征 否 在 目 己 的 工作 或 朋友 圈 里 。 这 些 调查 获得 的 信息 作为 手机 中 获取 
数据 的 补充 ， 帮 助人 们 更 好 地 进行 数据 分 析 。 


这 个 针对 百人 的 人 研 完 项 目的 成 采 非 党 或 短 人 心 。 一 个 名 为 “本 质 行 
为 ”的 计算 机 分 析 工 具 进 行 分 析 所 得 结果 表明 ， 通 过 人 研究 某 个 对 象 在 一 
天 中 早晨 的 所 在 位 置 、 与 其 他 参与 者 的 空间 接近 程度 、 通 话 记录 和 通 
话 活动 等 ， 可 用 于 推测 其 当天 晚上 的 行为 。 例 如 ， 某 个 人 在 一 个 星期 
六 的 上 午 10 点 本 来 ， 那 么 可 以 比较 准确 地 预测 当天 晚上 他 会 跟 哪 些 人 
一 起 出 现在 什么 地 方 。 另 外 ， 对 通话 记录 及 空间 接近 程度 数据 的 分 
析 ， 能 够 得 知 研 究 参 与 者 的 社交 网 络 关 系 和 社会 地 位 ， 比 如 ， 该 参与 


者 是 学 校 的 新 生 、 研 究 生 还 是 教授 ? 下 一 章 我 们 将 讨论 这 项 研究 的 成 
果 可 以 有 哪些 进一步 的 应 用 。 


目 从 诺基亚 和 拼 省 理工 学 院 的 这 项 合作 人 研究 开展 以 来 ， 大 学 和 企 
业 实 验 室 的 很 多 人 研究 项 目 都 开始 利用 移动 电话 作为 传感器 来 采集 多 种 
数据 ， 尽 管 主题 不 尽 相 同 。 例 如 ，2009 年 达 特 茅 斯 大 学 的 户 弘 等 人 
的 “ 声 首 感 知 ” 项 目 ， 通 过 iPhone (苹果 手机 ) 上 安装 的 软件 ， 以 一 种 
低 功 耗 和 保护 隐私 的 方式 捕捉 周围 的 声音 ， 判 断 其 所 处 的 环境 。 因 为 
如 条 手机 能 够 根据 声音 特征 ， 判 断 出 一 个 人 处 于 重要 会 议 中 ， 融 可 以 
将 一 些 人 的 来 电 直 接 转 至 语音 信箱 ， 而 男 一 些 通话 则 可 以 被 授 入 。 


麻 省 理工 学 院 的 媒体 实验 室 开发 了 知名 的 Funf 开 放 感 知 框架 系 
统 ， 作 为 一 个 开放 和 公开 的 系统 ， 它 可 以 被 用 于 追踪 手机 的 各 种 活 
动 。Funt 框 架 可 以 从 手机 上 的 多 种 “探测 仪 "获取 数据 ， 例 如 GPS 、 
定位 仪 、 加 速 仪 、 通 话 记 录 、 应 用 使 用 情况 、 屏 幕 状 态 以 及 电池 状态 
等 ， 并 加 密 存 储 在 手机 上 。 在 Funf 这 样 一 个 基础 框架 上 ， 任 何 一 名 开 
发 者 都 可 以 进一步 开发 符合 自身 需求 的 软件 。Funf Journal 则 是 一 个 现 
成 的 安 卓 系 统 手机 应 用 程序 ， 它 可 以 安全 地 将 探测 到 的 各 种 手机 数据 
加 密 存 储 。 人 们 还 可 以 将 数据 下 载 到 自己 的 电脑 或 上 传 到 远程 服务 器 
上 ， 以 供 进一步 分 析 。 


除了 Funf 框 染 ， 还 有 很 多 为 手机 和 个 人 电脑 设计 的 应 用 程序 ， 用 
于 获取 商业 性 的 数据 。 如 果 你 无 法 基于 框架 自己 开发 软件 ， 那 么 这 些 
简单 易 用 的 商业 应 用 程序 古 不 错 的 选择 。 特 别 是 ， 有 些 应 用 程序 可 以 
通过 监控 个 人 电脑 在 某 些 网 站 或 是 某 些 软件 上 的 使 用 时 间 ， 从 而 推算 
计算 机 使 用 者 的 工作 效率 ， 这 已 经 发 展 成 为 一 小 块 细 分 的 专业 市 场 。 


手机 一 一 最 佳人 体 传 感 融 


矿 省 理工 学 院 的 现实 挖掘 项 目 为 通过 开展 以 手机 为 基础 的 研究 来 
采集 个 人 数据 这 样 的 做 法 提供 了 恨 好 的 范例 。 人 赋 完 中 使 用 了 赫 尔 闻 基 
大 学 开发 的 一 个 定制 软件 ， 可 以 追踪 手机 的 各 种 状态 ， 如 通话 中 、 充 
电 中 、 关 机 状态 等 。 尽 管 作为 一 个 研究 项 目的 定制 软件 ， 一 般 人 没有 
机 会 接触 它 ， 但 是 市 面 上 还 有 很 多 其 他 具备 类 似 记录 功能 的 软件 。 其 
中 一 些 软件 可 以 直接 录入 GPS 数 据 ， 而 不 需 通过 移动 运 宫 商 或 古 使 用 
Wi-Fi (无 线 网 络 ) 三 角 定位 法 来 获得 手机 的 位 置信 息 。 


在 互联 网 上 搜索 一 下 ， 驶 能 找到 很 多 网 站 出 售 这 些 可 以 安 厂 在 苹 
条 手机 、 墨 奏 手 机， 以 及 装 有 安里 、 微 软 和 塞 班 等 手机 操作 系统 的 软 
件 。 这 些 软件 有 的 是 为 那些 担心 使 用 手机 的 孩子 和 孩子 所 处 位 置 的 父 
母 而 设计 ， 有 的 古 为 想 要 掌握 其 员工 使 用 公司 配备 手机 情况 的 雇主 而 
设计 ， 也 有 的 古 为 怀疑 男 一 半 有 不 中 行为 的 人 而 设计 的 。 需 要 注意 的 
征 ， 不 同 的 国家 和 地 区 ， 对 于 从 个 人 移动 电话 采集 数据 有 相应 的 法 律 
规定 ， 想 雪 合 法 地 采集 数据 ， 需 要 征 得 手机 所 有 者 或 是 设备 所 有 者 的 
同意 并 签署 合约 。 


追踪 软件 安装 在 手机 上 并 在 后 台 运行 ， 时 刻 记录 着 手机 的 一 切 活 
动 。 这 些 记 杂 稍 后 会 修 发 送 到 远程 服务 上 璐 上 ， 并 可 通过 一 个 网 站 获 
得 。 包 括 呼 入 和 呼出 号 码 、 通 话 时 长 以 及 时 间 戳 记 在 内 的 通话 记录 会 
被 采集 ;即使 在 手机 上 已 经 被 删除 ， 文 字 短 信也 会 被 完整 地 存储 在 远 
程 服务 右上 ; 还 有 GPS 位 置信 息 也 能 在 具备 信号 的 地 方 被 记录 下 来 。 
有 些 具 备 特 定 功能 的 手机 ， 其 网 址 访问 记录 也 会 被 存储 下 来 。 


针对 个 人 计算 机 的 类 似 商 业 监控 软件 也 同样 存在 。 这 类 软件 的 销 
售 主要 面向 那些 希望 掌握 上 自己 计算 机 使 用 情况 ,希望 借 此 进行 目 我 管 
理 并 提高 生产 效率 的 人 。 全 世界 现在 有 数 百 万 人 每 天 使 用 计算 机 的 工 
作 时 间 都 长 达 数 小 时 ， 包 括 使 用 电子 邮件 、 即 时 通信 、 网 页 浏览 软件 
以 及 文字 、 图 片 和 基本 上 所 有 在 电脑 上 运行 的 软件 如 视频 处 理 软 件 。 


而 像 RescueTime、Klok、SlimTimer 和 WorkTime 这 类 软件 ， 可 以 追踪 记 
录 前 台 软 件 运行 的 时 间 ， 并 将 数据 反馈 给 用 户 。 


这 些 软件 有 的 是 直接 安 夺 在 电脑 上 ， 有 的 则 是 通过 网 页 运行 。 某 
些 情 况 下 ， 人 们 可 以 将 这 些 软 件 捕 提 的 信息 打上 标签 ， 例 如 读 新 闻 故 
事 ， 并 分 至 使 其 成 为 “公共 的 ”信息 。 人 们 还 可 以 设 定 某 些 特定 应 用 的 
目标 使 用 时 间 ， 比 如 每 天 早晨 用 30 分 钟 回复 电子 邮件 。 然 后 软件 会 以 
可 视 化 的 方式 来 展现 设 定 目标 的 完成 情况 ， 并 且 使 用 者 还 可 以 设 定 任 
务 变更 提醒 ， 以 防 目 己 在 某 一 应 用 上 耗费 的 时 间 过 长 。 


除了 在 个 人 设备 上 进行 自动 追踪 记录 的 后 台 软 件 外 ， 还 有 一 类 基 
于 调查 的 手机 软件 也 在 迅速 发 展 。2009 年 秋天 ，Techneos 公 司 发 布 了 
SODA 系 统 ， 该 软件 系统 使 研究 人 员 、 调 研 公司 在 内 的 任何 人 都 可 以 
在 手机 上 发 布 调查 问卷 。 因 为 对 大 多 数 人 来 说 ， 手 机 是 随 吴 携 市 的 。 
与 在 线 问卷 相 比 ， 手 机 问卷 可 以 选择 在 特定 时 间或 特定 地 点 进行 ， 与 
电话 问卷 相 比 又 不 会 显得 那么 唐 突 。 


SODA 对 于 想 要 为 现实 挖 所 采集 信息 的 人 来 说 ， 将 会 是 一 个 有 趣 
的 工具 ， 因 为 相 较 通常 意义 上 的 问卷 调查 ， 它 可 以 让 人 们 提供 更 多 的 
相关 信息 。 比如 经 参与 调查 者 的 许可 获得 其 位 置信 息 ， 他 们 还 可 以 在 
问卷 中 提交 图 片 。 这 个 平台 非常 灵活 开放 ， 问 卷 问 题 种 类 非常 多 样 ， 
可 以 是 多 项 选择 、 浮 动 计 算 、 开 放 数 值 或 文本 、 声 音 文件 、 图 片 文件 
甚至 旦 条 形 码 输入 。 另 外 ， 该 平台 还 文 持 多 种 语言 ， 目 前 包括 汉语 、 
英语 、 法 语 、 和 葡萄 牙 语 、 西 班 牙 语 、 德 语 、 印 度 语 、 日 语 和 泰语 。 
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通过 电脑 或 手机 记录 一 个 人 的 工作 效率 、 通 信 记 录 、 进 行 问卷 调 
只 是 人 们 日 常生 活 场景 中 的 一 部 分 。 生 物 传 感 右 则 可 以 填补 这 
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一 空缺 ， 它 可 以 精确 记录 每 日 不 同时 间 和 不 同 活动 中 人 们 的 生理 变 
化 。 研 究 人 员 可 以 借助 一 些 特 定 的 硬件 设备 追踪 被 研究 者 (通常 是 那 
些 慢性 疾病 患者 ) 的 心率 、 血 压 、 皮 肤 导电 性 以 及 其 他 一 些 指标 ， 或 
古 在 一 些 需 要 手动 记 杂 症状 、 饮 食 和 运动 信息 的 情况 下 ， 也 需要 借助 
这 些 硬件 设备 。 


BodyMedia 是 一 家 知名 的 设备 以 及 在 线 服务 供应 商 ， 这 些 设备 和 
服务 可 以 仍 中 和 喘 体 活动 并 根据 健康 需要 适当 地 发 出 提醒 。CardioNet 公 
司 则 提供 便携 式 心电图 仪器 。 还 有 诸如 FitBit 计 步 磊 、Nike+ 运 动 奶 味 
系统 、Polar 和 Garmin 的 GPS 手表 、Withings 的 无 线 体 重 分 析 仪 等 也 都 
在 市 场 上 占有 一 席 之 地 。 (Zeo 公 司 的 个 人 睡眠 教练 同样 也 在 市 场 上 获 
得 了 一 定 的 成 功 ， 它 是 一 个 退 躁 睡眠 状况 的 无 线头 市 ， 可 以 根据 数据 
分 析 情 况 发 送 指 令 到 床 边 的 曾 钟 或 手机 上 。 但 很 不 玛 ， 这 家 公司 于 
2013 年 解散 了 。) 另外 ， 越 来 越 多 的 手机 应 用 程序 也 开始 使 用 手机 上 
的 加 速度 仪 和 GPS 传 感 右 来 采集 生物 计量 信息 。 表 1-1 列 出 了 一 些 用 于 
记录 生物 数据 的 商业 技术 。 


软件 开发 者 们 也 开发 出 了 可 以 提供 专业 睡 眼 追 踩 的 某 些 相 同 功能 
的 手机 应 用 程序 ， 虽 然 精 确 性 仍 不 稳定 。iSleepTracker 和 Sleep Cycler 
是 其 中 的 两 个 ， 它 们 利用 手机 的 加 速度 传感器 感知 用 户 睡眠 时 在 床上 
的 动作 。 类 似 的 还 有 安 旱 平台 上 的 Smart Alarm 应 用 ， 它 可 以 预 判 人 们 
的 睡眠 阶段 。 因 为 这 些 应 用 程序 并 不 能 直接 衡量 一 个 人 的 动作 (而 且 
判断 的 结果 会 受 床 上 的 人 或 动物 数量 以 及 床 执 性 能 的 影响 ， 它 们 的 
主要 功能 似乎 是 叫 醒 处 于 浅 睡 眠 阶段 的 人 ， 从 而 避免 人 们 在 深度 睡 眼 
时 被 弄 醒 而 产生 不 适 。 

表 1-1 商业 化 感知 设备 的 用 途 、 性 能 和 交互 方式 


产品 


用 途 


特性 


交互 方式 


Body Media 公 司 的 
Body Media FIT 


监测 睡眠 质量 和 消耗 的 


营 带 形式 ， 其 中 装 有 一 个 用 于 


卡路里 ， 主 要 适用 于 有 
减肥 需求 的 用 户 


监测 动作 的 三 轴 加 速 仪 ， 一 个 
测量 皮肤 温度 的 温度 计 ， 一 个 
测量 皮肤 水 含量 的 皮肤 电 反 应 
感应 器 ， 以 及 一 个 测量 身体 热 
量 散 发 的 热流 传感器 


臂 带 上 装 有 简单 的 LED 指示 
器 ; 更 详细 的 数据 会 通过 设备 
定期 上 传 到 服务 器 上 ， 用 户 可 
以 在 网 站 上 获取 数据 


CardioNet 公 司 的 移 
动心 脏 门 诊 遥 感 需 


FitBit 公 司 的 FitBit 监 
测 器 


Zeo 公 司 ( 该 公司 于 
2013 年 解散 ) 的 Zeo 
个 人 睡眠 教练 


为 心律 不 齐 患 者 监测 心 
跳 和 其 他 问题 


监测 特定 类 型 的 低 强度 
身体 活动 以 及 睡眠 质量 


监测 睡眠 期 间 大 脑 和 脸 
部 肌肉 的 活动 


一 个 小 巧 的 ， 可 穿戴 的 心 电 
图 仪器 ， 可 以 24 小 时 监测 心 
Bk, 最 长 可 以 连续 记录 21 天 


可 以 夹 在 裤子 或 文胸 上 的 一 个 
小 型 的 、 不 显眼 的 计 步 器 。 每 
次 充电 后 可 以 使 用 10 天 


包括 一 条 头 带 ， 用 于 测量 睡眠 
阶段 和 质量 对 应 的 脑 电 波 活 
动 。 数 据 通过 无 线 传输 到 一 个 
专门 的 闹钟 上 ， 使 其 在 人 们 睡 
眠 最 浅 的 时 候 叫 醒 他 们 


贴 在 佩戴 者 胸 前 的 电导 线 将 电 
子 信号 传输 到 一 个 小 型 的 便携 
监控 器 上 ， 这 个 监控 器 可 以 戴 
在 脖子 上 。 当 心跳 异常 时 ， 监 
控 器 可 以 通过 无 线 传输 数据 到 
分 析 中 心 ， 在 这 里 ， 数 据 会 被 
进一步 分 析 并 给 医生 发 送 报告 
一 个 家 用 基站 从 计 步 器 上 无 
线 传输 数据 到 计算 机 服务 器 ， 
并 上 传 到 专门 汇总 这 些 数据 
的 网 站 


一 个 显示 睡 卢 信息 的 专门 六 
钟 ， 以 及 一 个 分 析 睡 卢 信息 并 
把 睡眠 质量 和 不 同 的 生活 方式 
关联 起 来 的 网 页 服务 


Innovative Sleep 
Solutions 公司 的 


iSleep Tracker 


监测 睡眠 活动 和 质量 


一 个 类 似 手 表 的 设备 ， 用 于 监 
测 睡眠 活动 


有 一 个 提供 分 析 和 可 视 化 服务 
的 网 站 


WIN Human Recorder 
公司 的 HRS-I 


监测 心跳 和 其 他 问题 ， 
同时 还 监测 体温 和 活动 


一 个 小 型 的 感应 器 组 合 ， 贴 在 
使 用 者 胸 前 ， 每 次 充电 可 以 使 
用 3~4 天 


数据 被 传输 到 手机 或 日 
可 以 在 线 浏览 


Garmin Forerunner 
910XT GPS 设备 


记录 步行 或 跑步 的 时 
间 、 距 离 、 海 拔 以 及 心 
率 ， 还 有 游泳 时 的 距 
及 泳池 的 水 下 深度 


一 个 类 似 手表 的 设备 ， 监 测 不 
同 模式 的 体力 消耗 和 移动 距离 


数据 通过 无 线 传输 到 一 个 
提供 数据 分 析 和 分 享 的 网 


站 一 一 Garmin Connect 


Nike+ 程 序 利 用 了 苹果 手机 、 安 卓 手 机 以 及 iPod 〈 苹 果 音 乐 播放 
an) 这 些 人 们 经 常 在 跑步 时 用 来 听 音 乐 的 设备 ， 通 过 夹 在 鞋子 上 或 置 
入 在 耐 元 某 些 特制 鞋 宾 的 计 步 设备 采集 跑步 数据 ， 并 通过 无 线 设 备 传 
输 至 手机 或 首 乐 播放 右上 。 当 设备 通过 用 户 的 计算 机 连 上 互联 网 进行 


同步 更 新 时 ， 数 据 会 被 上 传 到 耐克 公司 的 网 站 上 ， 用 户 可 以 看 到 目 己 
的 进步 ， 并 可 以 与 其 他 用 户 的 数据 进行 实质 比较 。 这 一 系统 的 目的 是 
帮助 积极 跑步 或 徒步 的 人 记录 其 锻炼 成 果 。 


还 有 RunKeeper、Runtastic、Runmeter 等 手机 应 用 可 以 在 手机 与 
GPS 卫星 直接 联系 信号 条 件 较 好 的 情况 下 ， 通 过 GPS 定位 来 妃 踪 人 们 
的 户外 活动 x 人 们 也 可 以 手动 输入 一 些 非 户外 活动 的 信息 ， 如 在 室内 
游泳 等 。 某 些 健身 设备 还 可 以 与 手机 直接 相连 并 同步 输出 数据 。 所 有 
这 些 信息 都 可 以 被 集成 到 一 个 可 视 化 图 表 中 ， 展 现 个 人 的 锻炼 进展 ， 
以 及 不 断 癌 目标 靠近 的 过 程 。 


RunKeeper 应 用 还 与 Withings 公 司 建立 了 合作 。Withings 的 无 线 体 
重 分 析 仪 可 以 在 人 们 每 次 称 体重 时 ， 将 数据 自动 同步 至 RunKeeper 网 
站 。 该 数据 可 以 被 用 来 帮助 粗略 估算 用 户 以 一 定 速度 跑 完 特定 距离 需 
要 消耗 的 热量 值 。 


上 面 提 到 的 这 些 应 用 和 设备 都 提供 了 多 层级 的 用 户 控制 功能 ， 以 
便 用 户 控制 被 采集 数据 的 导出 方式 。 有 些 应 用 目 市 免费 的 分 析 功 能 ， 
需要 通过 付费 以 获得 一 些 高 级 功能 。 对 Body Media 公 司 来 说 ， 人 研究 人 
员 就 必须 购买 许可 才能 获取 设备 采集 到 的 所 有 数据 ， 而 没有 参与 研究 
项 目的 个 人 用 户 ， 则 需要 购买 该 公司 的 在 线 服 务 并 提供 大 量 个 人 信 
上 乱 ， 才 能 获得 。 虽 然 这 些 产品 为 我 们 提供 了 远 比 任何 时 候 都 多 的 对 于 
目 我 号 体 的 认 知 ， 用 户 还 是 应 该 认真 阅读 产品 用 户 协 议 ， 以 确保 清楚 
地 知晓 数据 是 如 何 采 集 和 使 用 的 ， 以 及 数据 的 所 有 权 归 属 等 问题 。 我 
们 将 在 第 二 章 继续 探讨 数据 所 有 权 的 问题 。 


可 以 感知 周围 环 境 的 机 如 学 习 
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个 第 三 方 可 以 是 你 的 医生 ， 也 可 能 是 公众 可 以 获取 健康 数据 的 公共 网 
站 。 本 质 上 ， 这 古人 们 对 目 己 映 体 状态 进行 的 “状态 更 新 ”。 近 年 来 ， 
公众 热衷 于 各 种 各 样 的 状态 更 刹 ， 因 此 提供 了 大 量 关 于 人 们 行为 习惯 
的 信息 。 


有 些 行为 追 踩 应 用 程序 可 以 在 一 个 活动 完成 后 ， 如 一 次 跑步 或 目 
行车 骑 行 后 ， 目 动 更 新 推荐 或 脸谱 网 的 个 人 状态 。 BITE be EI IA Rea 
斯 大 学 的 “声音 感知 ”项 目 利 用 手机 的 麦 殉 风 获 取 声 音信 息 ， 从 而 推断 
出 一 个 人 所 处 的 位 置 环境 和 正在 从 事 的 活动 ， 并 可 以 用 来 简单 更 新 个 
人 状态 ， 如 在 一 家 咖啡 饮 中 、 在 户外 步行 或 是 正在 刷牙 等 。 这 个 程序 
通过 机 妖 学 习 技 术 对 捕捉 的 声音 片段 进行 分 析 ， 对 首 乐 、 人 声 等 一 些 
基本 的 声音 进行 判断 ， 并 对 用 户 的 声音 特征 进行 目 我 学 习 。 当 然 ， 这 
也 是 在 保护 隐私 的 前 提 下 进行 的 ， 原 始 声 首 片 段 并 不 会 被 存储 下 来 ， 
只 是 被 处 理 并 提取 特征 信息 ， 这 些 特 征 信 息 并 不 足以 被 用 来 再 现 原始 
的 声音 片段 。 


生命 全 记录 


很 明显 ， 采 集 个 人 的 数据 和 信息 可 以 有 多 得 无 法 计数 的 方式 ， 但 
征 尚 没有 统一 的 方法 来 采集 各 种 类 型 的 数据 ， 这 些 数据 目前 可 能 是 由 
不 同 软件 及 设备 目 动 获取 ， 还 有 可 能 是 人 工 记录 的 。 不 过 已 经 有 越 来 
越 多 的 人 正在 试图 创造 一 种 可 以 记录 其 全 部 或 部 分 生活 的 方式 :他们 
希望 关于 目 己 的 一 切 都 可 以 被 量化 。 


生命 记录 作为 一 种 趋势 ， 在 技术 导向 型 的 社会 群体 中 更 受 欢 迎 。 
其 中 一 部 分 人 开发 了 在 线程 序 和 手机 应 用 来 记录 数据 ， 专 门 的 硬件 ， 
如 穿戴 式 摄像 头 来 采集 视频 和 图 像 ， 以 及 电子 表格 用 以 记录 日 党 活 
动 ， 如 吃 东 西 的 感受 以 及 不 同 的 情绪 等 。 生 命 记录 是 其 他 数据 采集 方 


法 的 补充 ， 并 试图 在 一 个 紧密 框架 下 整合 数据 对 个 人 生活 进行 定量 化 
的 描述。 


生命 记录 具有 无 限 的 潜力 。 有 一 个 明显 的 作用 是 它 可 以 让 人 们 认 
识 到 自己 的 习惯 ， 以 及 习惯 的 小 小 改变 会 如 何 改变 他 们 的 生活 。 不 过 
其 实 还 有 更 多 意义 更 深远 的 可 能 性 。 如 今 ， 没 有 人 真正 了 解 心脏 病 的 
纵 问 指标 完 竟 是 什么 ， 但 是 随 着 越 来 越 多 的 人 对 目 身 生活 如 此 多 的 生 
活 片 段 进行 目 我 监测 并 将 其 分 至 ， 人 研究 人 员 可 以 利用 这 些 数据 来 回顾 
疾病 患者 几 个 月 或 十 儿 年 间 的 数据 ， 并 确认 一 些 相关 性 、 可 能 诱因 ， 
以 及 严重 疾病 的 光 在 指标 。 


最 引 人 注 目的 那些 生命 记 隶 项目， 往往 都 采用 了 目 动 影像 捕捉 技 
术 。2009 年 年 末 ， 动 作 捕捉 设备 生产 商 美国 威 康 公 司 授权 微软 公司 使 
用 其 技术 ， 用 于 制造 和 销售 一 球 可 以 目 动 招 摄 一 系列 贯 罕 全 天 照片 的 
穿戴 式 摄像 涉 。 微 软 的 SenseCam 摄 像 设备 包括 一 个 广角 镜头 和 多 个 电 
子 感应 器 ， 其 中 有 光照 强度 和 光照 颜色 感应 器 、 修 动 红外 探测 右 、 温 
度 感 应 器 以 及 多 轴 加 速度 仪 等 。SenseCam 可 以 通过 程序 设 定 其 拍照 的 
固定 时 间 间 隔 ， 或 是 根据 佩戴 者 或 环境 变化 ， 通 过 感应 锅 记 孙 ， 触 发 
THER 


如 今 ， 合 歌 公司 正在 积极 推广 他 们 的 生命 记录 设备 一 一 合 歌 眼 
镜 。 它 将 平视 显示 屏 、 摄 像 头 、 麦 克 风 、 微 处 理 胡 以 及 无 线 模 块 等 ， 
全 都 集成 在 一 副 眼 镜 的 框架 上 。 通 过 语 首 控制 ， 摄 像 头 就 可 以 扣 照 或 
摄像 。 谷 歌 眼镜 的 显示 屏 是 联网 的 ， 因 此 可 以 显示 短信 或 用 来 进行 导 
航 。 开 发 者 们 还 可 以 为 谷歌 眼镜 开发 游戏 、 提 醒 软 件 等 各 种 新 的 应 
用 。 虽 然 这 款 产品 还 处 于 研发 早期 ， 但 已 经 获得 了 很 大 的 关注 。 没 有 
人 知道 它 在 技术 圈 之 外 将 会 有 多 流行 ， 但 它 可 能 只 是 这 类 可 穿戴 设备 
的 一 个 先遣 部 队 而 已 。 


其 他 的 小 型 可 穿戴 相机 还 有 GoPro 和 Contour， 都 是 为 极限 运动 而 
设计 的 。 这 两 者 都 有 多 种 类 型 的 基 座 ， 以 适应 不 同 的 使 用 方式 ， 如 固 


RETESA EE Be AE EHO ER © 35 — FHA LoocxieH $425 AY ERR 
WU AT DA BGN TE FSS E ° 


有 一 些 在 线 博 客 积 素 了 不 少 关 于 这 些 生命 记录 设备 、 系 统 和 软件 
的 信息 ， 包 括 本 章 前 面 提 到 的 那些 。 戈 登 : 贝 尔 和 吉姆 : 戈 梅 尔 的 “全 面 
回忆 ?以 及 凯 文 : 毁 利 的 “量化 目 我 "部 是 关于 生命 记录 的 流行 博客 。 微 
软 公司 的 戈 登 : 贝 尔 是 一 位 多 产 的 生命 记录 者 ， 他 已 经 为 一 个 叫 作 
MylifeBits 的 项 目 记录 了 数 年 的 个 人 数据 。 这 个 项 目 可 以 在 线 查 看 ， 
片 、 视 频 、 电 话 通话 记录 、 个 人 信件 以 及 问候 卡片 等 都 被 分 类 记录 在 
此 并 支持 查询 。 


想 全 面 记 杂 你 的 生活 ， 刚 开始 最 好 能 有 一 些 引 导 。 有 时 候 人 们 从 
关注 自己 生活 的 某 个 方面 开始 ， 比 如 睡觉 和 起 床 的 时 间 ， 然 后 扩展 到 
其 他 比较 容易 记录 的 方面 。 哈 佛 大 学 的 “幸福 追踪 ”项目 (Track Your 
Happiness) 是 一 个 关注 单一 指标 的 记录 系统 。 参 与 者 会 收 到 系统 目 动 
发 送 的 短信 ， 通 过 短信 可 以 链接 到 一 个 简短 的 问卷 调查 ， 询 问 参 与 者 
当前 正在 做 什么 以 及 感受 如 何 。 在 连续 参与 几 周 每 天 数 次 的 问卷 回答 
之 后 ， 参 与 者 会 得 到 一 份 将 参与 者 的 回复 形象 化 了 的 “个 人 幸福 报 
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男 一 个 名 为 “你 的 数据 流 ”(your.flowing.data) 的 系统 可 以 让 人 们 
通过 推 特 消息 ， 将 上 自己 正在 做 的 事情 直接 发 送 至 一 个 在 线 数 据 库 。 在 
发 送 的 推 符 上 附加 预 完 设 定 的 一 条 “阅读 X” 或 “观看 X” 的 标签 ， 可 以 帮 
助 精 确 记 录 和 分 类 。 该 系统 可 以 记录 消息 发 送 的 时 间 ， 同 时 形成 时 间 
礁 记 信息 ， 之 后 可 以 在 该 网 站 上 生成 可 视 化 的 活动 频率 图 。 


“天 天 日 记 ”(DailyDiary) 网 站 则 是 向 用 户 推送 邮件 询问 特定 的 预 
先 选 择 的 问题 ， 如 “你 今天 怎么 样 ? ”或 是 “你 今天 上 吃 了 些 什么 ? ”用 户 
通过 回答 这 些 问 题 ， 获 得 相应 积分 ， 从 而 可 以 参与 一 个 在 线 社 区 ,得 
看 其 他 人 回 各 目 目标 努力 的 进展 情况 。 


尽管 有 这 么 多 的 工具 可 以 让 人 们 通过 数字 方式 记录 和 组 织 更 多 的 
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易 让 人 和 起 了 使 用 。 生 命 记录 的 目标 是 尽 可 能 多 地 采集 信息 ， 只 要 生命 
记录 中 还 有 很 大 比重 的 数据 需要 依靠 手动 输入 ， 它 殉 仍 将 是 一 个 边缘 
行为 ， 因 为 记录 的 目标 是 获取 尽 可 能 多 的 信息 ， 而 大 多 数 人 只 是 选择 
性 地 偶尔 记录 他 们 的 生活 事件 。 


人 们 有 越 来 越 多 的 方式 来 追踪 和 记录 自己 的 生活 和 习惯 ， 并 且 可 
以 在 后 台 和 被动 地 完成 大 部 分 的 追 踩 工作 ， 从 而 省 去 了 人 们 输入 信息 的 
烦恼 。 一 些 人 也 许 会 认为 ， 个 人 数据 采集 会 真正 成 功 ， 直 到 人 们 不 再 
需要 不 时 关心 设备 状况 、 数 据 输入 和 调整 设置 ， 男 一 些 人 则 相信 人 的 
主观 性 应 该 始终 十 数据 采集 链 中 重要 的 一 环 ， 这 样 一 来 ， 他 们 才能 目 
己 选 择 哪 些 数据 应 该 以 什么 方式 在 什么 地 方 被 存储 下 来 。 


忠 目 前 情况 来 看 ， 个 人 数据 采集 技术 在 一 段 时 间 内 ， 将 采用 一 条 
介 于 上 述 两 者 之 间 的 路 径 。 每 个 人 对 自己 个 人 信息 的 公开 程度 都 有 各 
目的 容 妨 度 ， 所 以 最 好 的 方式 古 ， 仍 躁 服 务 供应 商 提 供 人 简单 易 慌 的 隐 
私 选 项 ， 由 每 个 用 户 目 己 来 进行 选择 和 设置 。 另 一 些 对 隐私 不 敏感 的 
用 户 也 会 感到 满意 ， 因 为 有 各 种 设备 来 帮助 他 们 目 动 完 成 数据 采集 的 
工作 ， 他 们 只 需 在 想 雪 回顾 某 个 事件 或 想法 时 再 去 查询 相应 的 记录 束 
可 以 。 


如 今 的 软件 开发 者 们 比 以 往 任何 时 候 都 更 需要 了 解 人 类 心理 学 和 
社会 学 。 他 们 需要 了 解 ， 是 什么 因素 促使 人 们 去 记录 生活 中 的 一 些 特 
别 事件 或 活动 ， 以 及 如 何 才 能 使 记录 成 为 人 们 的 日 曾 习 惯 ? 他 们 需要 
了 解 ， 如 何 将 被 动 式 后 台 记 录 的 数据 展示 给 用 户 ， 而 不 显得 唐 突 和 具 
有 侵扰 性 ? 他 们 需要 学 会 ， 如 何 让 记录 生活 的 设备 造福 于 人 ， 而 非 平 
添 负 担 ? 而 对 于 生命 记录 设备 的 开发 者 来 说 ， 他 们 还 需要 知道 ， 仅 仅 
征 这 类 技术 的 存在 这 件 事情 本 号 ， 束 可 能 极 大 地 改变 社会 动态 性 。 我 
们 疝 不 清楚 ， 一 旦 人 们 知道 目 己 所 言 所 行 都 可 以 被 头 戴 谷 歌 眼 镜 的 朋 


友和 阳 生 人 ， 在 不 易 察 觉 且 未 经 允许 的 情况 下 记录 下 来 ， 将 会 做 何 反 
应 。 下 一 半 将 讨论 本 章 中 涉及 的 一 些 敏感 问题 ， 并 探讨 数据 在 个 人 层 
面 的 一 些 具体 应 用 。 


1. 时 间 戳 记 (time stamp) ， 是 指 唯一 的 标识 某 一 刻 时 间 和 日 期 的 一 个 字符 序列 。 
一 一 译 者 注 


第 二 章 
如 何 充分 利用 个 人 数据 ? 


即便 一 个 人 的 所 有 信息 数据 部 可 以 被 采集 ， 依 然 还 存在 这 样 的 问 
题 : 这 些 数 据 可 以 被 用 来 做 什么 呢 ? 本 章 将 为 这 一 问题 提供 一 些 答 
案 ， 包 括 几 个 具体 项 目的 介绍 ， 这 些 项 目的 目标 都 是 为 了 建立 一 个 可 
以 让 人 们 生活 得 更 加 健康 、 更 有 乐趣 的 系统 。 当 然 ， 这 些 项 目 也 都 还 
处 于 各 目的 早期 阶段 ， 对 于 个 人 层面 的 数据 挖 据 也 还 集 留 在 较 浅 层 
面 。 


一 类 激动 人 心 的 应 用 是 ， 使 用 个 人 数据 分 析 来 为 个 人 行为 提供 指 
导 ， 督 促 人 们 改变 行为 习惯 。 比 如 ， 提 醒 你 在 公司 的 会 议 上 更 多 或 更 
少 地 发 言 ， 控 制 你 在 某 个 网 页 上 的 浏览 时 间 ， 甚 至 是 督促 你 戒烟 。 市 
场 上 已 有 的 计 步 厦 、 热 量 计 等 设备 已 经 可 以 有 反馈 有 关 健 康 习惯 的 信 
思 ， 试 图 让 人 们 更 加 关注 所 号 的 食物 ， 并 从 行为 上 有 所 改变 。 这 种 督 
促 被 付 诸 实践 的 程度 ， 将 会 决定 一 个 人 是 否 真 的 可 以 实现 他 的 目标 。 


个 人 数据 分 析 也 可 以 被 整合 到 一 些 特定 的 系统 中 ， 当 判断 出 有 些 
不 太 寻 常 的、 可 能 有 潜在 危险 的 事情 发 生 ， 或 是 财物 有 损坏 或 被 偷盗 
的 风险 时 ， 这 些 系统 可 以 发 出 通知 。 比 如 ， 可 以 追 蹊 用 户 的 位 置 以 判 


断 安 全 情况 ， 或 汽车 是 否 被 盗 等 。 


本 章 提供 的 个 人 层面 数据 使 用 项 目的 列表 还 远 未 详尽 。 更 确切 地 
说 ， 本 章 只 是 对 那些 企业 家 和 人 研究 人 员 已 经 或 将 要 开始 思考 他 们 目 己 
计划 的 领域 做 了 一 次 探索 。 这 类 项 目 目前 呈现 出 爆发 式 增长 的 态势 ， 
每 天 都 有 很 多 关于 个 人 数据 的 应 用 程序 出 现 ， 其 中 一 些 具 有 不 错 的 前 
景 ， 有 些 则 可 能 是 县 花 一 现 。 但 是 越 来 越 多 的 应 用 都 指 同 同一 个 发 展 
趋势 : 使 用 个 人 数据 来 为 每 一 个 人 服务 。 


暂且 不 谈 这 些 应 用 ， 基 于 个 人 数据 挖掘 的 这 些 项 目 和 产品 ， 都 清 
楚 地 表明 我 们 需要 更 加 注重 隐私 保护 的 问题 。 哪 些 人 可 以 获得 某 个 人 
的 数据 ”数据 是 属于 那些 生成 数据 的 个 人 ， 还 是 属于 那些 数据 采集 技 
术 的 所 有 者 ? 目前 这 些 都 疝 无 定论 。 


汽车 保险 公司 是 否 可 以 使 用 人 们 区 车 前 往 的 目的 地 的 数据 ， 从 而 
收取 更 高 的 保险 费用 ? 已 经 有 一 些 健康 保险 公司 同 罕 戴 计 步 器 的 用 户 
提供 保费 折扣 ， 因 为 他 们 认为 这 样 的 用 户 会 进行 更 多 的 运动 ， 从 而 有 
可 能 减少 身体 健康 方面 的 费用 文 出 。 健 康 保险 公司 会 追踪 更 多 其 他 种 
类 的 个 人 数据 吗 ? 比如 用 户 的 吸烟 习惯 或 他 们 的 社交 网 络 ? 信用 卡 公 
司 也 已 根据 不 同 用 户 在 某 些 特定 商店 购物 的 消费 情况 ， 疝 其 中 一 些 用 
户 收取 更 高 的 透 文 利 电 。 然 而 ， 这 样 是 否 公平 呢 ? 获取 这 些 数据 的 公 
司 会 比 生成 这 些 数 据 的 个 人 获 花 更 多 吗 ? 


这 些 问题 都 还 有 竺 进一步 讨论 ， 但 在 本 章 中 ， 我 们 将 探讨 个 人 数 
据 采 集中 的 隐私 和 政策 ， 以 及 这 些 方面 未 来 可 能 的 发 展 趋势 。 男 外 ， 
我 们 还 会 探究 如 何 让 人 们 尽 可 能 地 控制 个 人 数据 被 他 人 查看 和 使 用 的 
恒信 


可 以 大 你 戒烟 的 手机 应 用 


当 你 不 经 意 间 养 成 了 一 个 坏 习 惯 时 ， 对 于 形成 这 个 习惯 的 环境 ， 
你 可 能 只 有 一 些 模 糊 的 或 十 不 完整 的 概念 。 但 是 ， 如 采 你 能 够 将 这 个 
坏 习 惯 与 量化 的 行为 、 位 置 和 和 社会 状况 等 数据 关联 起 来 ， 也 许 你 束 有 
办 法 改变 它 。 

吸烟 行为 的 研究 是 一 个 很 好 的 例子。 该 项 目 还 处 于 早期 阶段 ， 它 
希望 通过 将 行为 、 位 置 和 社会 交往 与 吸烟 行为 进行 关联 ， 试 着 通过 改 
变 人 们 的 生活 习惯 来 改善 其 健康 状况 。 一 旦 这 些 关 联 因素 被 获知 ， 工 
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境 。 该 应 用 可 以 适时 发 出 反馈 信息 ， 比 如 提醒 你 路 一 块 口香糖 ， 以 代 
替 可 能 的 抽烟 行为 而 且 我 们 有 理由 相信 ， 在 吸烟 研究 中 开发 的 方法 
具有 被 应 用 到 其 他 的 行为 改变 项 目 中 的 可 能 性 ， 如 一 般 性 药物 滥用 和 
依赖 、 高 风险 性 行为 、 宫 养 平衡 以 及 日 党 锻炼 等 。 


由 内 和 森 : 伊 格 尔 和 他 的 同事 们 开展 的 这 个 研究 项 目的 研究 对 象 是 
18~25 风 的 年 轻 烟 民 。 这 些 吸烟 者 中 ， 有 些 人 的 吸烟 频率 低 达 每 个 月 只 
吸 一 两 根 烟 。 但 是 近期 的 研究 表明 ， 即 使 如 此 低 的 吸烟 频率 ， 长 期 来 
看 也 可 能 成 锋 。 而 将 研究 对 象 设 定 为 年 轻 烟 民 ， 是 因为 这 个 年 龄 段 的 
吸烟 者 比例 高 达 38%， 这 一 数据 超过 所 有 其 他 年 龄 段 。 


据 信 计 ， 贫 尔 吸 烟 者 中 有 一 半 人 在 大 学 四 年 毕业 后 依然 吸烟 ， 但 
男 外 一 半 则 彻 抵 戒烟 了 。 这 表明 对 于 大 学 期 间 贫 尔 吸烟 的 人 来 说 有 一 
个 转变 期 ， 在 此 期 间 ， 他 们 有 可 能 在 这 个 关键 时 期 转 为 不 吸烟 者 ， 而 
这 正 是 手机 应 用 可 以 介入 并 发 挥 作用 的 时 期 。 


使 用 手机 应 用 来 帮助 人 们 戒烟 并 不 是 一 个 新 奇想 法 。 事 实 上 ， 广 
泛 开 展 的 禁烟 运动 瓯 是 通过 互联 网 和 移动 设备 ， 辐 青少年 和 年 轻 人 发 
送 禁 烟 教育 和 治疗 信息 。 然 而 ， 伊 格 尔 和 他 的 同事 们 开展 的 这 个 名 
为 “生态 瞬间 评估 ” (Ecological Momentary Assessment) 的 项 目 ， 其 目 
标 是 使 用 手机 采集 实时 数据 ， 并 评估 同龄 人 的 关系 和 交往 对 个 人 吸烟 
习惯 的 影响 ， 以 及 促使 其 戒烟 的 可 能 。 这 个 项 目 结合 了 矿 省 理工 学 院 
一 个 早先 的 现实 挖掘 项 目的 相关 元 素 ， 利 用 手机 后 台 应 用 程序 针对 正 
在 发 生 的 个 人 行为 通过 简单 问卷 调查 。 


忠 这 个 项 目 来 说 ， 泌 有 传 感 右 且 在 年 轻 人 中 普及 度 很 高 的 手机 ， 
征 一 个 非常 合适 的 研究 工具 。 该 项 目 计划 对 纽约 城市 大 学 的 100 名 学 生 
进行 数据 采集 ， 这 些 人 每 月 至 少 吸 一 根 烟 。 手 机 目 动 采集 并 上 传 各 种 
行为 数据 ， 包 括 通过 GPS 获得 的 位 置 和 移动 数据 、 通 过 通话 记录 获得 
的 联络 数据 以 及 通过 蓝牙 获得 的 与 他 人 的 空间 接近 度 的 数据 等 。 
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过 手机 回答 一 些 问 题 ， 包 括 吸烟 行为 、 引 发 他 们 吸烟 的 社交 和 环境 氛 
> 吸烟 的 迫切 度 ， 以 及 如 何 应 对 吸烟 需求 等 。 因 为 在 回答 这 些 问题 
时 ， 手 机 仍然 在 同步 记录 个 人 的 社交 网 络 信息 ， 将 这 些 信息 结合 起 
来 ， 可 以 针对 个 人 及 其 吸烟 的 影响 要 素 形 成 一 个 生态 有 效 的 描述 。 从 
而 ， 利 用 这 样 的 信息 分 析 结 果 人 告知 人 们 有 哪些 有 效 的 社会 支持 可 以 帮 
助 其 戒烟 。 


这 个 项 目的 终极 目标 是 形成 一 个 预测 工具 ， 从 而 对 吸烟 者 生活 中 
影响 其 吸烟 行为 和 习惯 的 因素 进行 分 类 ， 而 且 其 精确 度 是 一 般 的 人 工 
观察 无 法 达到 的 。 为 实现 这 个 终极 目标 ， 首 先 需 要 建立 一 个 可 以 识别 
每 日 、 每 周旋 至 每 月 的 个 人 日 单行 为 结构 模式 的 算法 。 之 前 很 多 研究 
项 目 都 所 出 了 类 似 的 想法 ， 即 用 显示 个 人 日 彰 活 动 及 其 可 预测 性 的 方 
式 对 个 人 行为 进行 措 述 。 当 人 们 将 手机 用 于 建立 模式 之 后 发 现 ， 该 方 
法 比 以 往 的 任何 方法 都 更 具 精 确 性 。 


这 项 研究 意义 深远 ， 从 实践 角度 来 看 ， 它 可 以 在 临床 研究 中 被 用 
于 回答 与 社交 网 络 相 关 的 问题 ， 这 在 以 前 只 通过 观察 获取 数据 时 是 无 
法 回答 的 。 未 来 临床 医生 将 可 以 识别 出 一 个 人 的 社交 网 络 中 ， 帮 助 哪 
些 人 最 有 可 能 使 其 戒烟 。 此 外 ， 该 研究 生成 的 信息 还 可 以 改善 手机 的 
干预 方式 ， 包 括 可 以 通过 手机 识别 用 户 所 在 的 场景 ， 从 而 提醒 用 户 ， 
促使 其 远离 可 能 诱发 吸烟 的 场合 。 


这 个 项 目 在 理论 研究 层面 也 处 于 前 沿 ， 可 以 为 社会 、 环 境 和 心理 
决定 因素 之 间 的 复杂 交互 研究 提供 新 的 灵感 ， 这 些 都 是 研究 者 们 多 年 
来 认为 可 能 影响 年 轻 人 吸烟 习惯 的 因素 。 例 如 ， 关 于 年 轻 吸 烟 者 是 否 
征 受 到 吸烟 朋友 的 影响 ， 还 是 与 他 们 的 朋友 们 在 同一 时 间 段 内 各 目 分 
别 养 成 了 吸烟 的 习惯 ， 一 直 都 有 争论 。 而 区 分 这 两 种 不 同 的 情况 ， 对 
于 设计 有 效 的 干预 手段 来 说 是 非常 重要 的 。 


最 后 ， 这 项 通过 手机 进行 的 研究 中 所 采用 的 方法 ， 将 可 以 被 广泛 
应 用 到 其 他 关于 习惯 的 各 项 研究 中 。 事 实 上 ， 人 研究 者 们 已 经 在 不 同 的 
行为 问题 研究 中 探索 类 似 的 解决 方法 。 在 埃 森 冰 公 司 的 一 项 研究 中 ， 
工程 师 们 开发 了 一 个 应 用 ， 可 以 监测 人 们 在 一 次 会 议 或 是 谈话 中 的 讲 
话 时 长 。 这 个 系统 通过 用 户 手 机 上 的 麦克 风采 集 谈话 数据 并 存储 在 一 
个 中 央 服 务 右 上。 该 项 目的 目标 是 让 人 们 更 加 了 解 目 己 的 发 言 习惯 ， 
因为 发 言 往往 是 难以 被 目 我 掌握 的 。 然 而 ， 更 重要 的 是 ， 这 个 系统 还 
整合 了 手机 推送 功能 ， 它 可 以 根据 实际 情况 ， 判 断 用 户 发 言 时 间或 是 
沉默 时 间 过 长 ， 从 而 发 出 提醒 。 实 时 分 析 和 反馈 机 制 可 以 帮助 人 们 更 
加 有 效 地 进行 社交 和 商务 活动 。 


类 似 的 ， 计 算 机 上 的 行为 监测 软件 也 可 以 用 于 改变 一 个 人 的 坏 习 
惯 。 第 一 章 中 提 到 几 个 软件 ， 例 如 Slife 、RescueTime 、Klok、 
SlimTimer， 以 及 WorkTime， 可 以 监测 用 户 在 不 同 应 用 程序 上 所 花费 
的 时 间 ， 并 为 用 户 提供 反馈 报告 。 这 些 软件 中 ， 有 一 些 还 可 以 提供 可 
视 化 的 分 析 ， 显 示 用 户 的 计算 机 使 用 习惯 ， 用 户 可 以 据 此 为 目 己 制定 
具体 目标 ， 如 某 些 特定 应 用 的 使 用 时 间 和 方式 。 尽 管 有 些 软件 已 经 可 
以 通过 分 析 获 得 数据 ， 用 来 制定 促使 你 改变 使 用 习惯 的 策略 。 但 其 实 
人 们 可 以 利用 这 些 数据 做 得 更 多 。 例 如 ， 一 组 员工 可 以 在 某 个 工作 任 
务 中 直接 看 到 其 他 人 的 数据 并 相互 竞争 ， 形 成 一 个 社交 性 的 博 灾 ， 而 
不 仅仅 只 接受 机 器 的 定时 提醒 。 生 产 效率 监测 工具 是 一 个 最 好 的 例 
子 ， 作 为 一 个 发 展 成 熟 的 领域 ， 它 需要 工程 师 们 开发 更 多 的 创新 工具 
进一步 提升 生产 效率 。 
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另 一 类 使 用 个 人 数据 的 方式 是 建立 一 个 监测 系统 ， 当 菜 人 的 行为 
产 重 超出 利 规 ， 并 对 和 触及 可 能 的 有 害 或 危险 领域 时 进行 预警 。 目 然 ， 
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隐私 问题 关注 者 的 警惕 。 然 而 ， 如 有 果 可 以 在 符合 伦理 要 求 的 情况 下 使 
用 这 些 系统 ， 它 们 可 以 在 一 些 场 合 发 挥 很 大 作用 ， 比 如 对 偷盗 汽车 的 
行为 进行 预警 ， 或 是 提醒 护士 、 病 人 有 弄 汕 状况 。 


这 一 类 系统 的 关键 之 处 在 于 采集 一 系列 关于 个 体 的 位 置 和 社会 交 
往 数据 ， 并 基于 数据 分 析 来 判断 个 体 的 固有 行为 或 是 一 般 行为 的 范 
围 ， 第 一 章 对 此 已 有 讨论 。 


以 护理 监测 老人 为 例 ， 人 们 可 以 通过 固有 行为 来 判断 ， 某 个 事件 
的 发 生 是 否 超越 了 被 监测 人 的 行为 空间 。 一 个 人 的 行为 空间 ， 本 质 上 
征 其 行为 的 数学 表达 ， 包 括 一 系列 相互 依存 的 变量 。 所 谓 超 越 行为 至 
间 的 事件 ， 并 不 单纯 是 某 人 之 前 没有 做 过 的 事情 。 而 是 根据 相关 数据 
对 茶 个 行为 进行 分 析 ， 考 虑 到 先前 的 行为 特征 ， 发 现 这 件 事 发 生 的 概 
率 太 小 ， 以 至 于 极 有 可 能 发 生意 想不到 的 状况 或 具有 洪 在 危险 。 


设想 一 下 ， 如 果 一 个 老人 在 晚上 11 点 上 了 一 辆 公交 车 ， 前 往 城 市 
里 他 之 前 几乎 从 未 涉足 过 的 一 个 地 方 ， 并 且 他 的 社交 圈 中 也 没有 认识 
的 人 居住 或 经 常会 出 现在 那里 。 那 么 ， 掌 握 这 个 老人 社交 信息 和 移动 
数据 的 手机 或 其 他 罕 戴 设备 就 可 以 判断 ， 这 个 老人 的 行为 是 否 超越 了 
他 的 一 般 行为 范围 。 根 据 这 样 一 个 监测 系统 的 设置 ， 这 个 老人 可 能 会 
得 到 系统 推送 的 通知 并 被 要 求 进行 反 饿 ， 或 是 老人 的 监护 人 会 收 到 警 
报 。 


包括 通用 电气 以 及 一 些小 的 初创 企业 在 内 的 许多 公司 ， 都 试图 在 
快速 增长 的 老龄 人 群 监测 系统 市 场 上 占据 一 定 的 份额 。 很 多 系统 使 用 
的 都 是 用 在 住宅 周围 安装 分 布 式 感应 右 的 方式 对 一 个 老年 人 进行 监 
测 。 尽 管 这 些 感应 器 可 以 高 精度 地 感知 一 些 特定 的 行为 比如 正在 厨 
Bee) ， 但 它们 的 安装 和 维护 较为 复杂 而 且 也 很 昂贵， 因此 可 能 会 
限制 该 领域 和 相关 公司 进一步 的 发 展 。 


像 这 种 基于 固有 行为 的 系统 也 可 以 用 于 汽车 防盗 。 虽 然 现 在 市 场 
上 已 经 有 多 种 无 线 电 汽 车 定位 系统 ， 包 括 LoJack 和 通用 电气 的 
OnStar， 它 们 可 以 在 汽车 被 盗 后 对 其 进行 定位 ， 但 基于 固有 行为 的 系 
统 可 以 更 具 前 脆性 。 当 汽车 在 非 正 常 时 间 被 鸭 驶 到 非 正常 地 点 时 ， 这 
类 系统 会 做 出 判断 并 向 车 主 进行 确认 ， 以 确定 车 主 对 汽车 的 这 个 非 固 
有 行为 知晓 。 


大 数据 ， 大 隐患 


当然 ， 所 有 的 现实 挖掘 程序 在 理论 世界 里 都 是 完美 的 。 现 实 挖 所 
研究 项 目 能 够 很 顺利 地 进行 的 原因 之 一 束 是 ， 癸 完 对 象 们 对 项 目的 要 
求 充 分 理解 ， 他 们 也 相信 研究 人 员 会 小 心 严 到 地 保护 他 们 的 隐私 。 而 
且 他 们 也 知道 该 项 目 会 结束 ， 他 们 可 以 选择 目 己 的 数据 被 采集 并 被 分 
析 ， 也 可 以 随时 选择 退出 而 不 会 有 任何 损失 。 


然而 ， 从 科研 到 现实 世界 的 转换 是 微妙 的 。 如 采 和 是 一 个 第 三 方 公 
司 在 获取 个 人 数据 并 提供 反馈 ， 那 么 如 何 才能 保证 隐私 得 到 恰当 的 保 
护 呢 ? 有 意思 的 是 ， 由 于 移动 电话 所 具有 的 基本 特点 ， 个 人 层面 数据 
采集 的 隐私 保护 相对 来 说 可 能 是 最 容易 的 。 被 采集 的 数据 可 以 通过 多 
种 方式 存储 到 云端 或 企业 设置 的 远程 服务 右上 ， 但 还 有 其 他 的 选择 : 
手机 可 以 将 数据 存储 在 本 地 。 因 为 手机 的 处 理 絮 能 力 和 存储 空间 每 两 
年 承 能 翻 一 番 ， 因 此 惑 在 前 两 年 ， 一 个 小 小 手机 在 计算 能 力 上 已 经 相 
当 于 体积 上 比 它 大 很 多 的 个 人 计算 机 了 ， 现 实 挖掘 的 任务 完全 可 以 在 
移动 设备 上 进行 。 不 断 增 长 的 手机 计算 和 存储 能 力 ， 使 得 数据 不 必 非 
得 上 传 到 远程 服务 器 上 才能 进行 处 理 、 存 储 或 分 享 给 第 三 方 。 这 就 是 
说 ， 目 前 大 部 分 的 数据 分 析 ， 采 用 的 是 本 地 手机 和 远程 服务 器 共同 分 
析 的 混合 方式 。 然 而 ,根据 1986 年 通过 的 《美国 电子 通信 隐私 法 
案 〉》， 在 某 些 情况 下 ， 执 法 部 门 和 政府 部 门 不 需要 获得 任何 授权 ， 只 


需要 一 张 传票 ， 束 有 权 获 取 远 程 服务 右上 的 个 人 数据 。 但 是 ， 如 末 想 
要 获得 存储 在 个 人 计算 设备 上 的 数据 ， 则 依然 需要 授权 许可 。 


即便 如 此 ， 绝 大 多 数 提供 个 人 数据 采集 服务 的 公司 ， 仍 然 选 择 本 
地 和 远程 服务 器 的 混合 方法 。 存 储 在 远程 服务 器 上 的 数据 可 以 被 用 于 
分 析 以 改进 产品 。 画 外 ， 这 些 数据 本 号 对 于 公司 来 说 也 具有 很 高 的 价 
值 ， 可 以 用 于 定位 目标 客户 需求 。 所 以 ， 尽 管 从 技术 上 来 说 ， 用 户 具 
有 了 掌握 数据 的 可 能 性 ， 但 实际 上 他 们 可 能 根本 没有 这 个 选择 权 。 此 
外 ， 想 要 搞 清 楚 数 据 的 存储 和 处 理 苹 在 本 地 设备 还 古 在 远程 服务 器 上 
进行 的 ， 需 要 一 定 的 技术 容 门 ， 对 于 智能 手机 来 说 更 古 如 此 ， 因 为 六 
能 手机 的 应 用 总 十 在 后 台 进 行 不 断 的 网 络 连接 。 而 要 想 搞 清楚 所 有 使 
用 程序 的 服务 条 球 ， 则 需要 很 强 的 心理 人 负 答 能 力 : 哪些 数据 是 与 其 他 
公司 共 至 的 ? 哪些 会 让 数据 失效 ? 服务 条 款 是 否 有 更 新 ? 更 新 了 哪些 
内 容 ? 如 果 你 对 这 个 程序 的 服务 不 其 满意 ， 是 否 可 以 将 数据 转 入 至 其 
他 程序 ? 


如 此 说 来 ， 如果 在 哪个 领域 内 可 以 建立 坚实 的 数据 所 有 权 的 条 
款 ， 那 么 必然 是 在 个 人 层面 。 因 此 ， 数 据 所 有 权 和 隐私 保护 的 新 法 规 
需要 由 企业 、 有 用户、 团体 组 织 以 及 法 律 专家 共同 来 制定 。 毕 竞 ， 我 们 
很 容易 想象 出 那些 个 人 数据 的 使 用 和 分 析 可 以 被 用 来 控制 、 胁 过 或 勒 
索 用 户 的 情况 。 当 健康 保险 公司 发 现 一 个 客户 正 与 可 能 会 增加 其 吸烟 
可 能 性 ， 同 时 减少 其 运动 可 能 性 的 朋友 外 出 ， 保 险 公司 是 否 可 以 据 此 
提高 保费 ”如 采 软 件 可 以 通知 虐待 老人 的 护 工 ， 他 /她 所 看 护 的 老人 正 
在 前 往 一 个 更 安全 的 地 方 ， 那 么 到 底 谁 是 技术 的 受益 者 呢 ? 和 警察 在 被 
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公司 是 否 可 以 根据 客户 经 党 开车 前 往 的 目的 地 的 安全 程度 ， 来 收取 相 
应 的 保险 费用 呢 ? 


过 去 几 年 ， 在 地 方 政 府 处 理 大 量 个 人 和 公共 感知 设备 相关 事务 的 
过 程 中 ， 所 有 以 上 提 到 的 问题 都 得 到 了 极 大 的 关注。 其 中 有 些 问题 的 


答案 已 经 开始 有 些 眉目 了 。 在 接 下 来 的 几 个 部 分 中 ， 我 们 将 宙 要 介绍 
个 人 数据 层面 三 个 重要 的 应 用 程序 ， 从 中 可 以 看 出 ， 在 某 些 领域 ， 我 
们 姐 切 需要 一 种 新 的 数据 隐私 和 所 有 权 形 式 :， 比如 健康 你 健 奖励 机 
rill > LS ATTA tah, DA RO RR REAR TI AGP LET A 
等 。 尺 管 这 些 只 是 对 个 人 数据 采集 可 能 市 来 的 问题 的 初步 探讨 ， 但 作 
为 一 个 恨 好 的 开端 ， 它 们 可 能 会 帮助 我 们 找到 可 以 广泛 应 用 于 不 同 领 
域 的 解决 方案 。 


健康 激励 古 与 非 


对 拥有 不 健康 生活 习惯 的 客户 进行 经 济 处 襄 的 做 法 并 不 第 见 ， 如 
今 最 利用 的 是 一 种 所 谓 的 健康 激励 项 目 ， 即 参与 者 如 采 选 择 了 更 好 的 
生活 习惯 ， 融 可 以 获得 奖励 ， 如 果 他 有 坏 习惯 不 给 予 经 济 处 罚 。 事 实 
上 ， 过 去 的 几 年 中 ,“ 健 康 激励 管理 行业 * 出 现 了 越 来 越 多 的 运营 公 
司 。 这 些 公 司 帮 助 雇主 激励 其 员工 参加 康 体 活 动 ， 促 使 他 们 的 生活 方 
式 同 着 积极 健康 的 方 同 转 变 。 


这 个 领域 的 公司 包括 Virgin Health-Miles 、RedBrick Health 、 
Tangerine Wellness 等 ， 它 们 帮助 雇主 调解 其 员工 的 健康 保险 理赔 ， 从 
而 最 终 减 少 雇主 的 文 出 。 雇 主 可 以 考虑 如 何 利 用 节省 下 来 的 这 部 分 文 
出 来 激励 员工 选择 健康 生活 ， 一 些 雇主 选择 降低 员工 的 目 付 额 ， 男 一 
部 分 选择 减少 保险 费 或 共同 付费 额度 等 。 


总 体 来 说 ， 有 两 种 项 目 类 型 : 一 类 是 对 参加 健康 相关 课程 的 人 进 
行 痰 励 ， 如 一 个 戒烟 辅导 等 ， 男 一 类 是 对 达到 某 些 健 康 指标 的 人 进行 
奖励 ， 比 如 在 一 定时 间 内 减 重 30 磅 (213.6 TF 52) 体重 。 这 两 种 类 
型 的 案例 中 ， 参 与 者 都 有 可 能 获得 每 个 月 100 美 元 及 以 上 的 健康 保险 费 
用 减免 。 


计 步 器 、 手 机 上 的 加 速度 仪 、 心 率 监 测 仪 以 及 数据 记录 网 站 等 感 
知 端 ， 在 这 类 健康 激励 项 目 中 扮演 着 日 益 重 要 的 角色 。 例 如 ， 有 的 项 
目 使 用 计 步 器 来 设置 员工 可 以 参加 的 挑战 ， 还 有 的 项 目 使 用 这 些 感知 
设备 帮助 人 们 设置 健康 目标 。 如 采 某 个 人 在 某 个 项 目 中 的 表现 不 佳 ， 
也 不 会 被 昼 丈 ， 只 是 他 会 因此 失去 了 一 个 市 约 保费 的 机 会 。 是 否 参 加 
这 些 项 目 全 攒 和 目 愿 ， 但 它们 确实 正 变 得 越 来 越 受 欢迎 ， 有 些 公司 员工 
的 参与 率 甚 至 高 达 809%。 


使 这 些 项 目 具 有 自愿 性 ， 并 且 以 “为 自己 省 钱 ” 的 概念 来 代替 “ 昼 
款 ”， 帮 助 项 目 在 近 些 年 获得 了 广泛 的 参与 。 在 2007 年 和 2008 年 ， 包 括 
百 得 和 惠而浦 在 内 的 公司 都 开始 对 吸烟 的 员工 处 以 罚金 。2008 年 ， 惠 
而 浦 解雇 了 一 名 为 了 逃避 每 年 500 美 元 的 吸烟 罚金 而 撒谎 的 员工 。 然 
而 ， 这 个 事件 至 少 使 得 一 家 公司 一 Tribune 公司 放弃 了 对 吸烟 员工 进 
行 惩罚 ， 这 表明 有 些 公司 更 愿意 选择 “* 葛 下 ”而 非 *“ 大 棒 ” 政 策 。 


尽管 这 类 健康 激励 项 目 已 经 存在 很 多 年 了 ， 但 未 来 这 类 项 目的 数 
量 以 及 其 中 使 用 的 技术 的 复杂 程度 都 将 提升 很 多 。 感 应 万 不 仅 越 来 越 
便宜 ， 体 积 也 越 来 越 小 ; 更 重要 的 是 ， 立 法 也 在 推动 这 个 产业 的 发 
展 。2010 年 的 春天 ， 美 国 总 统 奥巴马 签署 了 一 个 推动 该 行业 发 展 的 法 
案 ， 包 括 增加 提供 健康 管理 项 目的 企业 数量 、 提 升 员 工 参 与 人 数 、 更 
加 有 效 地 追踪 项 目 以 及 提升 项 目的 整体 效果 等 内 容 。 达 无 疑问 ， 实 施 
健康 激励 项 目的 公司 从 中 获得 了 财务 上 的 回报 。 美 国 健康 理事 会 称 ， 
在 健康 激励 项 目 上 多 投资 1 美元 ， 在 医疗 你 健 的 文 出 上 残 能 相应 市 约 3 
美元 。 


但 是 ， 如 何 保 护 员 工 的 健康 隐私 呢 ? 根据 2008 年 《美国 残疾 人 法 
案 》 (ADa) 修正 案 ， 雇主 不 得 向 员工 询问 其 医疗 健康 状况 ， 除 非 是 
工作 相关 并 且 有 业务 上 的 需要 。 然 而 ， 美 国平 等 就 业 机 会 委员 会 
(EEOC) 2002 年 的 一 份 实施 指南 中 称 ， 即 使 不 与 工作 相关 或 符合 业 
务 需 要 ， 雇 主 仍 然 可 以 了 解 员 工 的 医疗 历史 ， 作 为 健康 管理 项 目的 一 


部 分 。1996 年 的 《健康 保险 携带 和 责任 法 案 》 (HIPAA) 及 2006 年 的 
后 续 法 规 ， 人 允许 雇主 在 员工 健康 计划 中 安排 多 样 化 的 保费 、 免 赔 额 以 
及 共同 负担 保费 的 文 付 标准 。《 健 康 保 险 携 带 和 责任 法 案 》 中 的 反 层 
视 条 款 ， 禁 止 对 健康 状况 相似 的 员工 收取 不 同 保费 。 但 现在 还 不 清楚 
《健康 保险 携带 和 责任 法 案 》 及 一 些 新 规 中 的 类 似 条 款 ， 如 何 与 美国 
平等 就 业 机 会 委员 会 要 求 的 自愿 原则 相 协 调 ， 并 与 《美国 残疾 人 法 
案 》 中 的 隐私 规定 相 一 致 。 


这 类 项 目的 另 一 个 挑战 是 如 何 保证 基本 的 公平 性 。 早 期 相关 法 案 
的 一 个 重要 规定 古 交 励 额度 不 得 超过 员工 保险 额度 的 20%， 但 2010 年 
奥巴马 签署 的 新 法 案 将 比例 限额 提高 到 了 30%。 有 些 机 构 认 为 这 一 比 
例 过 高 ， 可 能 会 对 低 收入 着 造成 过 多 负担 ， 因 为 低 收入 者 相 比 高 收入 
者 更 可 能 出 现 健康 状况 。 


当 越 来 越 多 的 雇主 开始 实施 健康 激励 项 目 以 应 对 逐年 上 涨 的 健康 
保险 费用 时 ， 这 些 问 题 将 逐渐 浮 出 水 面 ， 并 成 为 中 心 议题 。 并 且 ， 当 
人 们 能 够 通过 更 加 精确 的 感知 设备 和 算法 ， 来 判断 某 些 特定 行为 与 健 
康 状 况 好 坏 之 间 的 因果 关系 时 ， 这 些 问 题 会 变 得 更 加 复杂 。 


和 车 载 感应 功 与 过 


如 今 ， 很 多 新 车 上 都 装配 了 GPS 和 其 他 导航 设备 、 用 于 辅助 泊 车 
和 倒车 的 外 部 摄像 头 、 探 测 车 辆 间距 离 的 感应 硕 ， 以 及 远程 控制 锁 车 
和 点 火 的 控制 硕 。 在 某 些 情况 下 ， 这 些 系统 能 使 警察 快速 地 追 踩 到 一 
辆 被 盗 汽 车 ， 甚 至 远程 控制 将 车 烛 火 。 


随 着 汽车 的 控制 系统 印加 计算 机 化 ， 我 们 可 以 合理 地 推测 ， 未 来 
的 某 些 车 型 中 可 能 会 安 狠 可 以 提供 驾驶 习惯 的 一 般 性 反馈 的 感知 设 
备 。 实 际 上 ， 现 在 想 监控 要 驶 过 程 的 话 ， 人 们 只 需要 购买 并 安 狼 一 套 
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并 使 用 这 类 车 载 感知 设备 来 评估 他 们 的 安全 营 驶 习惯 ， 据 此 对 其 保险 
费用 的 收取 标准 进行 调整 。 


传统 的 汽车 保险 根据 轰 驶 者 的 过 往 芍 驶 经 历 计 算 保费 。 衡 量 一 个 
敬 驶 者 是 否 “ 安 全 ”包括 很 多 方面 的 考量 : 有 记录 的 交通 违规 、 年 龄 、 
所 敬 驶 汽车 的 类 型 等 。 然 而 ， 近 年 来 发 展 出 了 一 种 新 的 模式 ， 被 称 为 
PAYD (pay—as—you—drive,“E 23 ET”) 。 
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区 驶 习惯 的 持续 反馈 。 简 而 言 之 ，PAYD 根 据 汽车 的 里 程 数据 ， 对 芍 驶 
频率 较 低 的 芍 驶 者 降低 其 保费 的 收 了 到。 但 是 车 载 感 知 设备 可 以 获取 更 
多 更 精确 的 数据 并 反馈 给 保险 公司 ， 包 括 速 度 、 距 离 、 每 天 的 开车 时 
间 ， 有 时 则 是 一 些 GPS 数 据 。 该 系统 可 以 让 保险 公司 针对 参 保 人 超速 
行驶 雪 独 时 间 过 长 ， 以 及 经 常 开 到 犯 菲 多 发 区 等 情况 征收 较 高 的 保险 
aA ° 


美国 的 很 多 保险 公司 ， 包 括 Progressive » Liberty Mutual 、 
MileMeter， 以 及 GMAC， 都 采用 PAYD 方 案 ， 少 数 儿 个 英国 、 加 拿 
大 、 南 非 和 日 本 的 公司 也 提供 一 些 PAYD 选 择 。 在 美国 有 超过 30 个 州 认 
可 PAYD 方 案 ， 但 由 于 客户 的 需求 不 多 ， 该 方案 在 美国 以 外 的 国家 被 接 
受 的 进程 一 直 十 分 缓慢 。 


例如 ， 加 利 福 尼 亚 州 在 2009 年 束 推 动 了 PAYD 保 险 方案 的 立法 。 除 
了 可 以 为 一 些 司 机 降低 保费 ，PAYD 方 案 还 提供 奖励 政策 以 减少 人 们 不 
必要 的 营 车 出 行 ， 从 而 降低 瘟 室 气体 的 排放 。 据 估算 ， 如 有 果 PAYD 保 险 
方案 能 在 全 美 范 围 内 达到 30% 的 使 用 率 ， 将 可 以 减少 10% 的 汽车 行驶 
总 里 程 ， 这 意味 着 可 以 在 10 年 内 减少 大 约 5 500 万 吨 的 二 氧化 矶 排放 


里 


在 加 利 福 尼 亚 州 推 出 的 最 初 方案 中 ， 保 险 公 司 可 以 有 要求 用 户 在 他 
们 的 汽车 上 安装 电子 监控 设备 。 因 为 里 程 数据 调整 起 来 很 容易 ， 所 以 
这 种 方法 与 仅 依赖 汽车 里 程 表 相 比 ， 可 以 减少 用 户 其 诈 的 可 能 性 。 但 
征 ， 一 个 非 彰 利 性 的 数字 版 权 倡 议 法 制 组 织 一 一 电子 前 治 基 金 会 迫使 
立法 者 对 该 法 案 进 行 了 修改 ， 将 里 程 表 和 电子 监控 仪 的 数据 都 纳入 可 
用 范围 。 


对 PAYD 系 统 的 担心 ， 主 要 围绕 保险 公司 可 能 会 将 用 户 数 据 出 售 或 
共 至 给 其 他 机 构 或 政府 ， 还 有 就是 这 些 系统 的 安全 性 。 此 外 ， 消 费 者 
在 怀疑 收费 不 合理 时 可 能 难以 对 保险 公司 账目 进行 审核 。 例 如 ， 电 子 
监控 系统 可 能 依赖 多 个 变量 ， 包 括 速 度 、 位 置 、 驾 驶 时 间 和 距离 以 及 
当 车 频率 等 ， 来 衡量 和 计算 保险 费用 。 但 是 每 个 变量 参与 计算 的 具体 
权重 ， 可 能 由 于 知识 产权 保护 的 某 些 规定 使 用 户 无 法 对 目 己 保费 的 完 
整 性 进行 审查 。 最 后 ， 系 统 可 能 并 无 法 全 面 反映 敬 驶 者 的 区 车 习惯 。 
一 个 偶尔 超速 的 驾驶 者 ， 实 际 上 ， 可 能 比 一 个 在 车 流 中 总 是 减速 和 狂 
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所 以 ， 尽 管 一 套 智能 感知 设备 和 算法 可 以 帮助 人 们 更 快 找到 丢失 
的 汽车 ， 也 可 能 帮助 降低 有 荣 些 营 驶 者 的 保费 ， 但 它 无 疑 也 使 隐私 政策 
和 法 律 的 制定 变 得 更 加 复杂 ， 最 终 使 一 些 芍 驶 人 处 于 不 利 的 位 置 。 


无 法 回避 的 个 人 隐私 


每 年 都 有 更 多 的 人 目 愿 将 其 个 人 数据 在 线 分 享 ， 有 的 是 锻炼 路 
线 ， 有 的 是 不 经 意 的 想法 ， 有 的 是 目 家 孩子 的 照片 。 尽 管 那 些 在 线 分 
享 个 人 数据 的 人 们 ， 也 许 并 没有 过 多 考虑 他 们 数据 的 洪 在 使 用 方式 ; 
他 们 只 是 分 译 数据 ， 并 且 在 大 多 数 情况 下 ， 他 们 可 以 在 目 己 布 望 的 时 
候 ， 从 公众 的 视野 里 将 这 些 数据 移 除 。 


但 是 ， 对 于 一 位 老者 或 是 一 个 精神 或 身体 上 不 健全 的 人 来 说 ， 情 
况 束 大 不 一 样 了 。 这 些 人 通常 对 应 用 在 他 们 映 上 监测 其 位 置 和 行为 的 
数据 感知 系统 没什么 话语 权 。 其 结果 束 是 ， 他 们 只 能 选择 相信 那些 看 
护 他 们 的 人 和 系统 。 


有 些 人 认为 对 老年 人 或 喘 体 功 能 受 限 者 进行 监控 的 想法 存在 一 个 
基本 的 道德 问题 ， 即 该 做 法 威胁 了 他 们 作为 人 的 基本 苯 闫 。 当 看 护 者 
或 医生 认为 一 个 人 需要 被 监护 和 人 退 踪 时 ， 病 人 的 目 主 性 就 被 前 弱 了 ， 
其 基本 公民 目 由 的 权利 也 更 容易 被 忽视 。 


针对 这 些 基 本 的 人 号 目 由 权利 ， 看 护 者 在 照看 病人 时 逾越 道德 界 
限 的 情况 并 非 鲜 有 听闻 “。 不 邓 的 是 ， 并 非 所 有 看 护 人 员 都 能 很 好 地 照 
顾 病 人 。 在 美国 一 些 地 方 ， 看 护 者 虐待 病人 并 进行 经 济 剥 前 的 案例 越 
来 越 普 过 。 这 促使 联邦 立法 者 们 制定 相关 法 案 ， 要 求 对 看 护 者 执行 更 
为 严格 的 育 景 检 查 等 措施 ， 以 城 少 看 护 者 虐待 老年 人 的 事件 。 然 而 ， 
由 于 大 约 90% 的 施 眶 看护 人 都 是 病人 的 家 庭 成 员 ， 这 种 挛 格 的 育 景 检 
但 措施 是 否 会 有 效 琳 还 很 难 讲 ， 因 为 施 虐 者 可 能 完全 没有 作为 看 扩 人 
的 历史 记录 。 


与 此 同时 ， 技 术 的 进步 也 使 得 老年 人 和 里 体 功 能 受 限 者 可 以 独立 
生活 得 更 信 ， 看 护 人 员 只 需要 远程 看 护 。 例 如 ， 通 用 电气 公司 开发 了 
一 父 产 品 ， 利 用 无 处 不 在 的 感应 设备 可 以 精确 但 不 被 察觉 地 识别 独居 
老人 的 行为 。 当 前 ,位 单 的 行为 追 踩 系 统 更 为 普 裔 ， 比 如 基于 GPS 
的 “地 理 围 栏 ? 可 以 在 被 追踪 人 离开 预定 至 间 范 围 时 问 看 护 者 发 送 警 
报 。 这 款 产 品 是 为 阿尔 泡 海 默 证 叫 者 所 设计 的 ， 但 也 可 以 用 于 儿童 和 
青少年 的 看 护 。 


立法 者 应 该 尤其 注意 那些 可 能 助 壬 为 虚 的 设备 ， 比 如 i-TAG 和 其 
他 一 些 更 复杂 的 感知 系统 。 它 们 会 在 一 个 被 施 虐 者 逃离 时 ， 立 即 同 看 
护 者 发 送 提示 消 恩 。 并 且 如 果 通 话 记录 也 被 设备 或 软件 监控 着 的 话 ， 
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单 的 了 。 至 少 曾 经 在 一 个 案件 中 ， 家 庭 又 力 的 受害 者 起 诉 了 Foxtrax 汽 
车 追 踩 设备 制造 商 ， 称 其 设备 在 一 次 攻击 行为 中 协助 了 施 虐 者 。 


警方 也 在 防范 家 性 暴力 中 使 用 个 人 GPS 退 踩 设 备 以 彼 之 道 ， 还 彼 
ZA: 美国 有 越 来 越 多 的 州 开 始 使 用 GPS 设备 监控 喘 负 限制 令 的 嫌疑 
人 ， 这 种 方式 之 前 被 执法 机 关 用 于 监控 被 指控 实施 儿童 性 虐 符 的 人 。 


尽管 我 们 都 知道 使 用 个 人 数据 的 设备 可 以 帮助 个 人 获得 更 高 效 的 
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处 ， 但 是 隐私 却 是 它们 无 法 回避 的 问题 。 人 研究 人 员 试 图 设想 这 些 设备 
运行 多 年 后 的 情景 ， 以 便 更 加 深入 地 讨论 使 用 过 程 中 必然 会 出 现 的 问 
题 ， 还 有 随 着 这 类 技术 进步 不 可 避免 会 产生 的 影响 。 然 而 ， 一 项 新 拉 
术 中 关于 个 人 隐私 或 技术 本 身 的 局 限 性 ， 比 如 基于 GPS 的 手机 应 用 或 
征 基 于 RFID 的 收费 必 片 ， 往 往 只 有 被 大 量 接纳 使 用 之 后 才 会 显现 并 开 

台 引 发 问题 。 


针对 人 们 对 隐私 问题 的 担忧 ， 一 个 最 普通 的 方式 是 让 人 们 可 以 目 
由 选择 进入 或 退出 某 个 项 目 ， 使 用 或 俘 用 某 项 技术 。 然 而 有 些 时 候 想 
完全 退出 行 不 通 。 因 此 ， 需 要 使 用 数据 采集 和 分 析 方法 从 而 为 人 们 提 
供 多 种 隐私 保护 选项 。 每 个 需要 用 户 进 行 设置 的 隐私 选项 都 应 该 被 准 
确 解释 ， 且 清晰 易 懂 。 例 如 ， 很 多 人 会 在 程序 询问 时 允许 手机 应 用 使 
用 其 位 置信 息 ， 但 是 很 少 有 人 会 清楚 知道 这 些 位 置 数据 是 如 何 被 使 用 
和 分 至 的 。 


人 们 对 隐私 的 态度 也 在 不 断 变 化 ， 在 脸谱 网 上 安心 发 布 目 己 照片 
或 者 在 推 竺 上 发 布 感想 的 人 们 都 会 同意 这 点 ， 公 共生 活 和 个 人 生活 之 
间 的 界限 已 经 日 在 模 糊 。 那 些 发 布 到 网 上 的 图 片 和 文字 可 以 被 任何 人 
浏 响 和 搜索 到 。 那 些 即 将 出 现 的 使 用 个 人 数据 的 新 技术 ， 无 论 它们 的 


数据 是 否 公开 ， 都 极 有 可 能 利用 公众 认同 或 至 少 是 公众 度 等 以 城 少 为 
不 同 应 用 采集 和 处 理 个 人 数据 时 产生 的 摩擦 。 


这 些 个 人 层面 的 现实 挖掘 方式 油 动 人 心 ， 它 们 用 数据 来 改变 人 们 
的 习惯 、 提 升 其 健康 状况 并 市 省 支出 。 随 着 有 关 个 人 “大 数据 ”的 想法 
日 益 普 及 且 对 大 从 来 说 日 益 重 要 ， 政 策 制定 者 、 和 社会 活动 家 和 技术 专 
家 们 关于 数据 所 有 权 和 某 些 基于 数据 的 产品 的 合法 性 讨论 将 会 越 来 越 
多 。 现 在 ， 是 时 候 来 认真 对 待 基 于 数据 的 产品 可 能 引发 的 问题 了 ， 正 
如 我 们 之 前 提 到 的 那些 。 如 有 果 能 以 正确 的 方式 来 使 用 这 些 产品 ， 那 么 
它们 在 未 来 将 会 为 后 续 产 品 提供 积极 而 有 花 的 范例 。 


:挖掘 社区 中 人 们 的 行为 ， 并 把 它们 和 其 他 诸如 交通 、 空 气 污染 ; 
; 或 其 他 环境 指标 数据 关联 起 来 的 工具 ， 对 于 关心 社区 的 积极 分 子 来 ; 
: 说 会 很 有 用 。 为 了 改善 社区 ， 积 极 分 子 可 以 向 在 公共 空间 活动 的 人 ; 
: 们 提供 空气 质量 感应 器 ， 比 如 那些 在 公园 游玩 或 在 等 公交 车 的 人 。 : 
; 如 采 这 些 感应 带 检 测 到 空气 污染 物 水 平 较 高 ， 那 么 束 可 以 发 起 针对 ; 
; 当地 工厂 的 请 愿 运动 ， 要 求 他 们 减少 污染 物 的 排放 。 : 
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第 三 章 
群体 的 数据 获取 


正如 第 一 章 中 提 到 的 ， 记 录 单 独 的 个 人 信息 的 低 成 本 商业 方法 有 
很 多 。 它 不 仅 方 式 相 当 人 简单 ， 而 且 被 记录 数据 的 人 们 在 某 种 程度 上 可 
以 控制 目 己 数据 的 使 用 方式 ， 以 及 怎样 使 这 些 数据 为 目 己 带 来 收益 。 
但 当 人 们 需要 从 小 规模 的 群体 中 采集 个 人 信息 时 ， 采 集 数 据 提供 适当 
奖励 以 获取 更 多 数据 的 复杂 性 会 扣 高 ， 即 使 这 些 人 效 起 于 同一 个 组 织 
或 对 象 ， 或 者 有 着 相同 的 目标 。 


用 来 进行 个 人 分 析 的 数据 ， 其 采集 通常 给 入 的 感觉 较为 私密 和 保 
守 ， 因 此 即使 在 较 小 范围 内 分 享 所 采集 的 个 人 信息 ， 也 会 让 人 们 觉得 
隐私 被 暴露 或 者 缺乏 安全 感 。 从 男 一 个 层面 来 说 ， 小 群体 的 数据 采集 


与 大 群体 (一 般 超 过 1 万 人 ) 相 比 有 较 大 差别 ， 因 为 在 小 群体 中 采集 数 
据 ， 其 个 人 的 号 份 信息 与 其 数据 往往 是 明确 联系 在 一 起 的 ， 而 针对 大 
群体 的 数据 采集 ， 个 人 的 喘 份 信息 一 般 会 从 数据 上 被 剥离 ， 以 给 人 匿 
名 的 感觉 。 


当 涉 及 具体 的 数据 使 用 案例 ， 如 公司 或 社区 组 织 使 用 个 人 数据 ， 
一 些 特别 的 挑战 便 会 产生 。 当 某 人 的 上 司 或 其 他 权威 人 士 可 以 获得 具 
体 的 个 人 信息 ， 人 们 会 本 能 地 排斥 。 同 样 ， 社 区 层面 的 数据 获取 也 很 
困难 : 城市 规划 师 、 政 客 或 社区 管理 员 等 需要 使 用 社区 层面 个 人 数据 
的 人 ， 可 能 无 法 获得 社区 中 每 个 人 的 支持 ， 从 而 导致 只 有 部 分 人 目 愿 
参与 。 


因此 ， 大 部 分 该 层面 上 的 数据 采集 ， 往 往 局 限于 参与 者 目 愿 签署 
了 数据 共 至 协议 的 研究 项 目 。 因 此 ， 这 类 项 目 一 般 具 有 一 定 程度 的 同 
质 性 ， 并 且 通 常 是 在 大 学 校园 里 开展 ， 因 为 这 里 的 人 一 般 具 有 共同 的 
行为 特征 。 例 如 第 一 章 中 提 到 的 ， 在 2003 年 开展 的 “现实 挖掘 项目， 
其 中 的 100 和 名 参与 者 吏 全 部 都 是 麻 省 理工 学 院 的 学 生 。 


尽管 商业 领域 已 经 为 采集 小 群体 规模 的 行为 数据 做 了 一 些 竹 试 ， 
但 收效 缓慢 。 有 一 个 例子 是 “智能 ”会 议 标识 卡 ， 这 些 智能 卡 基于 与 会 
人 员 的 社交 模式 通过 RFID 技 术 或 红外 线 感应 器 来 分 辩 他 们 的 社交 网 
络 。 这 些 智能 卡 为 人 们 提供 了 共 至 交流 信息 的 一 种 简单 方法 ， 也 使 会 
议 组 织 方 能 够 很 容易 地 得 知 每 个 分 会 场 的 参 会 情况 。 尽 管 这 些 智能 标 
识 卡 已 经 出 现 了 很 多 年 ， 但 仍然 未 被 广泛 使 用 ， 一 部 分 原因 是 其 花费 
较 高 ， 还 有 部 分 原因 是 其 可 靠 性 及 应 用 范围 有 限 。 


在 工作 场所 ， 人 们 并 不 缺少 可 以 用 于 存储 和 挖掘 工作 人 员 数 据 的 
软件 ， 包 括 生产 的 内 容 、 网 页 浏览 以 及 邮件 发 送 。 这 些 作 为 "知识 管理 
系统 ”为 我 们 所 熟知 的 软件 工具 ， 承 庄 通 过 人 允许 员工 更 便捷 地 获得 其 组 
织 内 部 信息 或 知识 的 办 法 ， 来 提高 员工 的 工作 效率 、 促 进 团 队 协作 以 
及 交流 。 然 而 知识 管理 工具 的 成 功 很 有 限 ， 因 为 将 它们 融入 一 个 公司 


的 技术 体系 及 其 团队 文化 是 很 困难 的 。“ 知 识 ” 通 常 是 被 男 外 附加 到 一 
个 系统 上 去 的 ， 但 只 有 经 过 这 种 组 合 ， 它 才 会 真正 对 某 一 个 特别 的 项 
目 产 生 用 处 。 另 外 ， 知 识 管理 工具 的 维护 费用 较 高 ， 人 们 也 无 法 及 时 
对 其 进行 衡量 。 


男 一 种 监控 工作 场所 的 类 型 是 通过 对 刷卡 钥匙 监视 右 ， 与 工作 相 
关 的 手机 通话 (词汇 、 语 调 、 频 率 等 ) ， 以 及 监控 办 公 室 或 设施 附近 
人 员 移 动 的 感应 絮 进 行 分 析 。 但 是 这 些 工具 几乎 从 未 个 公 司 末 用 过 ， 
唯一 的 例外 束 是 呼叫 中 心 ， 由 于 显而易见 的 原因 ， 其 通话 往往 是 被 监 
听 的 。 很 少 有 公司 愿意 冒 着 下 远 员工 ， 甚 至 可 能 引发 法 律 诉 讼 的 风 
险 ， 来 尝试 通过 这 些 有 符 证 实 的 方法 提高 工作 效率 。 


在 公司 和 工作 场所 之 外 ， 研 究 人 员 发 现 一 些 在 社区 层面 搜集 数据 
的 有 趣 原因 。 一 些 在 大 学 校园 及 其 周边 开展 的 项 目 ， 依 靠 市 民 参 与 来 
探索 不 同 的 环境 层面 问题 ， 包 括 空 气 污 染 、 垃 圾 堆放 、 道 路 状况 以 及 
通勤 路 径 等 。 这 些 数据 采集 是 简单 直接 的 ， 往 往 采 用 手机 作为 传 感 
磺 ， 但 其 挑战 在 于 ， 学 术 环 境 之 外 如 何 拓展 项 目 研 究 范围 。 超 出 学 术 
范围 的 项 目 扩展 ， 其 中 的 一 个 关键 是 提供 一 个 最 合适 的 激励 办 法 ， 让 
人 们 能 够 合理 地 权衡 是 否 要 在 小 范围 内 共 宇 目 吴 数据 以 从 中 获 利 ， 并 
做 出 有 依据 的 决定 。 


也 许 最 显而易见 的 方法 生 同 人 们 提供 智能 手机 的 同时 提供 流量 及 
通话 套餐 ， 以 换取 他 们 的 数据 。 几 年 前 ，IMMI 公 司 (综合 媒体 测量 公 
司 ) 就 成 功 地 通过 提供 智能 手机 的 方式 来 换取 用 户 向 他 们 提供 日 常生 
活 中 的 声音 片段 。 该 公司 的 目标 是 通过 这 些 声 音 样 本 来 判断 用 户 正 在 
消费 的 媒体 类 型 ， 其 中 包括 广播 、 电 视 、 电 影 等。 这 一 信息 可 以 用 来 
分 析 特定 退 体 内 容 的 受 欢 迎 程度 ， 类 似 于 内 尔 森 的 巡 体 调查 系统 。 值 
得 注意 的 是 ， 这 一 技术 并 不 记录 和 存储 个 人 对 话 或 原始 数据 。 尽 管 如 
此 ， 这 样 的 一 个 项 目 仍然 很 难 通过 大 学 伦理 委员 会 和 机 构 审查 委员 会 
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据 就 不 能 被 采集 ， 而 语音 数据 采集 却 是 这 个 项 目 主题 中 不 可 避免 的 。 


本 章 探 索 了 当 研 究 人 员 和 研究 公司 试图 从 特定 群体 中 采集 非 匿 名 
数据 时 ， 所 面临 的 技术 、 法 律 以 及 社会 挑战 。 为 什么 有 些 方 法 成 功 了 
有 些 却 没有 ? 以 及 在 这 个 尺度 上 的 “现实 挖 据 * 还 面临 着 怎样 的 机 遇 ? 


SuY+-=> 
i AE Pep A 


会 议和 公开 活动 古 采 集 不 同 个 人 数据 的 绝 佳 场合 。 从 参与 人 注册 
开始 ， 他 们 惑 已 经 提供 了 一 定量 的 人 口 统计 学 类 型 的 个 人 基本 信息 ， 
当 他 们 出 席 这 些 会 议和 活动 的 时 候 ， 往 往 希 望 尽 可 能 多 并 尽 可 能 高 质 
量 地 与 其 他 参与 者 进行 交流 。 一 个 可 以 追 踩 参 与 者 的 互动 情况 ， 并 且 
至 少 可 以 提供 一 份 电子 联系 人 名 单 的 智能 会 议 标 识 卡 ， 相 比 传统 的 握 
手 以 及 交换 名 片 来 说 是 一 个 实用 的 改进 。 


不 同 的 智能 会 议 标识 卡 在 设计 、 功 能 以 及 其 采集 存储 数据 的 方式 
上 都 会 有 所 不 同 。 但 最 基本 的 ， 它 们 都 配 有 RFID 心 片 。 这 种 必 片 包含 
部 分 识别 信息 并 且 可 以 被 特定 的 识 读 器 在 近 距 离 或 几米 范围 内 识 
别 。RFID 会 议 标 识 卡 最 常用 于 记录 会 议 的 参与 情况 以 及 参 会 人 员 的 用 
和 餐 情况 。 但 有 时 也 会 用 来 记录 与 会 者 的 移动 路 径 ， 还 有 他 们 与 安装 在 
不 同 三 商 的 展台 上 的 识 读 器 之 则 的 距离 。 这 些 标识 卡 将 识别 信息 传输 
到 凌 在 特定 位 置 的 RFID 电 子 识 读 船 上， 这 些 识 读 禹 按照 获取 信息 的 顺 
序 连 接 远 程 服 务 器 上 的 应 用 程序 ， 用 以 分 析 这 些 数据 。 


这 些 RFID 标 识 卡 往往 和 传统 标识 卡 外 观 无 异 ， 轻 重 相差 无 几 ， 但 
其 价格 仍然 是 推广 的 障碍 。 尽 管制 造 RFID 心 族 的 花费 在 过 去 10 年 间 下 
降 了 不 少 ， 智 能 标识 卡 仍然 比 传统 标识 卡 昂贵 。 像 微软 和 IBM (国际 
商用 机 器 公司 ) 这 样 的 公司 曾 在 一 些 会 议 中 试验 性 地 使 用 RFID 标 识 


卡 ， 而 另外 一 些 公 司 ， 如 安 联 科技 (Alliance Tech) 和 会 议 策略 

(Convention Strategy) ， 也 曾 为 其 做 过 商业 化 推广 。 这 些 商业 标识 卡 
可 以 记录 人 人 们 观看 某 个 展 贤 或 在 某 个 展台 逗留 的 时 间 ， 还 可 以 在 一 些 
拥有 某 个 特殊 头衔 或 在 特定 公司 工作 的 重要 人 士 出 现在 识 读 喜 范围 内 
时 ， 疝 展台 处 的 工作 人 员 发 送 电 子 邮件 和 文字 短信 。 


标识 卡 的 一 个 主要 问题 是 使 人 们 缺乏 对 隐私 的 控制 。 一 
智能 标识 卡 ， 佩 戴 者 的 个 人 数据 束 会 一 直 和 其 露 于 RFID 识 
] 


旦 佩戴 上 这 个 智 

读 器 之 下 ， 除 非 他 用 铝 箱 之 类 的 导电 材料 物理 阻隔 信号 。 人 们 无 法 选 
择 一 台 RFID 识 读 器 能 够 识别 什么 ， 也 无 法 决定 哪 一 台 识 读 器 能 够 识别 
标识 卡 的 事实 ， 造 成 了 这 样 一 种 情况 一 -佩戴 者 缺乏 对 卡片 的 控制 并 
可 能 会 因此 不 愿意 佩戴 这 些 标识 卡 。 这 也 是 推广 此 类 技术 的 一 大 障 


得 。 


这 些 智能 
ON 


电子 标识 卡 是 男 外 一 类 智能 标识 卡 ， 它 采用 包括 RFID 在 内 的 多 种 
传 感 絮 来 让 人 们 分 译 联系 方式 ， 并 且 可 以 与 他 们 目 己 以 及 其 他 人 的 标 
识 卡 互 动 。 比 如 ， 这 些 标识 卡 可 以 市 有 一 个 简单 界面 ， 通 过 显示 屏 和 
一 些 按钮 来 让 人 们 在 设备 上 查看 数据 ， 回 答 问卷 调查 。 


这 种 互动 性 相对 于 人 稍 单 的 RFID 标 识 卡 有 一 个 巨大 的 优势 ， 因 为 人 
们 可 以 选择 他 想 传输 的 信息 类 型 ， 这 有 利于 提高 个 人 对 信息 的 掌控 
感 ， 从 而 提高 其 分 序数 据 的 心理 祝 适 度 。 在 奔 省 理工 学 院 的 “现实 控 
握 ?" 项 目 中 ， 参 与 者 在 不 硕 望 手机 采集 他 们 的 行为 数据 的 时 候 ， 可 以 选 
择 “ 隐 喘 ”。 隐 身 模 式 这 项 选择 可 以 降低 参与 者 对 于 针对 其 个 人 的 数据 
采集 的 担忧 ， 校 内 校外 与 他 们 交往 的 人 也 位 列 担 忧 之 中 。 报 告 称 ， 参 
与 者 对 于 目 身 具备 掌控 数据 的 权利 而 感到 满意 ， 但 在 项 目 进行 过 程 中 
很 少 有 参与 者 真 正 激 活 了 隐身 模式 。 


由 于 其 (装置) 相对 复杂 ， 装 载 了 传 感 絮 的 电子 标识 卡 比 RFID 标 
识 卡 更 贵 ， 从 而 阻碍 了 前 者 的 广泛 应 用 。 男 外 ， 电 子 标识 卡 更 重 ， 这 
使 得 它们 不 适合 全 天 佩戴 ， 也 不 适合 日 程 比较 长 的 会 议 。 
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2009 年 3 月 安 联 科技 收购 nTag， 并 层 用 了 其 核心 员工 ， 现 在 安 联 科技 是 
nTag 技 术 的 独家 供应 两。 除了 众多 其 他 功能 之 外 ，nTag 标 识 卡 还 可 以 
促进 佩戴 者 与 其 他 人 交谈 ， 交 换 电子 名 片 ， 与 工作 人 员 、 演 讲 者 以 及 
其 他 参加 者 更 容易 地 交流 。 与 RFID 标 识 卡 相似 ，nTag 标 识 卡 同样 可 以 
让 会 议 组 织 首 监控 会 议 与 展台 的 参与 情况 。 


现 如 今 ， 有 越 来 越 多 的 人 都 在 使 用 具备 很 多 标识 卡 所 提供 的 功能 
的 智能 手机 。 我 们 现在 尚 不 清楚 ， 这 些 标 识 卡 公司 将 起 样 在 这 样 的 时 
代 中 经 营 下 去 。 雇 用 一 个 软件 开发 人 员 来 为 主流 的 智能 手机 操作 系统 
开发 应 用 程序 ， 以 便 与 会 人 员 使 用 目 己 的 个 人 设备 来 实现 nTag 标 识 卡 
所 具备 的 功能 ， 这 可 能 是 很 划算 的 选择 。 


科学 地 采 紧 你 的 员工 


凭借 数据 挖掘 软件 而 闻名 的 公司 ， 例 如 甲骨 文 和 IBM 等 ， 多 年 来 
一 直 在 运用 相关 技术 对 其 员工 所 产生 的 万 亿 级 别 数据 进行 分 析 。 这 类 
被 称 为 “知识 管理 ”的 数据 挖掘 项 目 ， 其 基本 目标 包括 规范 交易 流程 、 
开展 高 效 的 营销 活动 、 识 别 其 诈 行 为 ， 以 及 捕捉 律师 事务 所 立案 所 需 
的 “电子 证 据 ”(eDiscovery) 。 最 终 目 标 是 通过 提高 员工 工作 效率 ， 或 
者 更 为 理想 的 一 提高 员工 满意 度 来 改善 工作 环境 。 


Tacit 软 件 公司 是 这 一 领域 中 的 汕 楚 ， 该 公司 成 立 于 1997 年 ， 并 在 
2008 年 被 甲骨 文 收购 。Tacit 公 司 开发 的 软件 (第 四 章 中 将 会 详细 论 
述 ) 可 以 分 析 电 子 邮 件 交 流 、 博 客 和 维基 百科 词 条 ， 来 确定 人 们 的 兴 
趣 和 专长 。 这 一 软件 用 在 大 公司 中 可 以 帮助 员工 相互 认识 ， 从 而 在 解 
决 琼 手 问题 时 可 以 相互 帮助 。 洛 克 希 德 :马丁 、 诺 斯 洛 普 - 格 鲁 门 ， 以 及 
葛 兰 素 史 克 等 公司 都 采用 这 一 软件 。 


另外 ，Declara 公 司 目前 作为 一 个 所 谓 的 虚拟 咨询 协作 平台 ， 其 软 
件 可 以 创建 一 个 同 机 构 人 员 的 社交 了 网络， 并 且 通 过 他 们 所 产生 的 数据 
为 搜索 者 匹配 最 佳 信 息 。 


Tacit 和 Declara 公 司 的 技术 具有 蜗 度 的 自主 知识 产权 ， 因 此 可 能 价 
格 较 高 ， 但 还 有 其 他 较为 便宜 的 开源 选择 。 比 如 OpenKM 兼 容 市 面 上 
主流 操作 系统 ， 并 且 文 件 可 以 存储 于 诸如 甲骨 文 和 MySQL 一 类 的 本 地 
文件 系统 或 数据 库 管理 系统 。 此 外 ， 还 有 大 量 处 理 知 识 管理 各 个 方面 
工作 的 开源 软件 工具 ， 举 几 个 例子 来 说 ， 比 如 赛 门 铁 元 公司 的 KAON 


框架 、Exteca、Haystack 和 Kowari。 


员工 创造 的 数据 除了 显示 他 们 的 专业 知识 和 兴趣 之 外 ， 还 能 反映 
同一 机 构 中 工作 人 员 的 效率 。 在 过 去 的 几 年 间 ， 许 多 公司 的 人 力 资 源 
部 门 都 已 经 接受 了 使 用 员工 创造 的 数据 来 评估 员工 工作 效率 的 方法 。 
虽然 这 仍然 是 一 种 新 尝试 ， 但 它 使 企业 管理 者 能 够 量化 评 信 一 个 员工 
的 工作 能 力 以 及 他 在 公司 的 员工 网 络 中 所 扮演 的 角色 和 产生 的 效力 。 


Cataphora 公 司 现 在 借助 他 们 之 前 开发 的 ， 用 来 依法 证 实 一 些 公司 
过 去 曾经 犯 过 欺诈 徘 的 技术 ， 来 帮助 现在 的 公司 判断 他 们 的 员工 本 喘 
是 否 涉嫌 犯罪 。 该 软件 监控 员工 的 电子 事务 ， 包 括 电 子 邮件 、 发 送 和 
接收 的 附件 、 即 时 消息 以 及 日 程 安排 。 该 软件 负责 找 出 常规 交流 模 
式 ， 并 根据 该 模式 找 出 例外 情况 ， 比 如 签字 时 使 用 与 平时 不 同 的 语 
言 ， 有 时 候 就 是 作 疼 的 一 种 信和 号。 这 个 软件 可 以 发 据 员 工 之 间 的 小 圈 
子 ， 给 人 力 资源 专家 提供 潜在 的 线索 ， 使 其 能 够 分 辨 哪些 人 工作 产 出 
能 力 强 ， 哪 些 人 工作 产 出 能 力 弱 。 除 了 提供 企业 级 软件 之 外 ， 
Cataphora 公 司 也 为 员工 提供 一 份 说 明 书 和 一 个 商业 版 本 软件 ， 这 样 员 
工 就 可 以 了 解 他 们 的 老板 会 怎样 破译 他 的 个 人 数据 。 


尽管 对 于 一 个 在 办 公 室 工作 人 员 来 说 ， 发 送 和 接收 电子 交流 信息 
征 其 一 天 工作 中 的 重要 组 成 部 分 ， 其 工作 效率 和 社交 效果 也 可 以 通过 


其 他 指标 来 观察 。 例 如 电子 ID 卡 的 记录 可 以 显示 一 个 人 一 整 天 的 移动 
轨迹 。 


男 外 ， 文 字 短 信 、 语 音 通话 ， 还 有 通话 记录 也 可 以 用 于 评估 员工 
的 社交 网 络 及 其 行为 。 众 所 周知 ， 客 户 服务 中 心 会 通过 监听 语音 通话 
来 尝试 优化 雇员 与 客户 之 间 的 互动 。 现 在 的 软件 可 以 分 析 通 话 内 容 ， 
让 公司 了 解 顾客 通话 时 的 情绪 。Verint 系 统 有 限 公司 集成 了 语音 分 析 、 
电子 邮件 文本 、 即 时 信息 以 及 调查 的 反馈 ， 以 期 更 全 面 地 了 解 其 用 户 
对 公司 的 满意 度 。 


除了 使 用 客户 服务 中 心 的 行业 以 外 ， 雇 主 监听 员工 的 语音 通话 的 
情况 其 实 并 不 常见 。 何 况 ， 想 要 了 解 一 个 公司 员工 的 社交 状况 ， 并 不 
需要 完整 地 记录 他 们 的 语 首 通话 ， 对 于 鉴别 员工 个 人 或 团体 的 工作 能 
力 来 说 ， 也 没有 必要 这 么 做 。 分 析 语 音 特性 ， 比 如 从 上 一 轮 谈话 转换 
到 下 一 轮 的 风格 以 及 面对面 谈话 的 速度 ， 可 以 用 于 确定 社交 了 网络 的 结 
构 。 将 这 类 研究 拓展 到 语 首 通话 上 ， 可 以 免除 对 整个 通话 进行 录 首 的 
必要 ， 这 不 仅 能 最 大 限度 地 减少 隐私 方面 的 隐忧 ， 还 有 一 些 额 外 的 好 
处 。 


在 这 个 领域 中 对 于 合法 性 的 担忧 是 合理 的 ， 等 别 是 现行 的 法 律 并 
不 完善 ， 缺 乏 切 实 保护 雇主 或 被 雇佣 者 的 条 亚 。 尽 管 对 所 有 与 商业 相 
天 的 通话 进行 隶 首都 古 合 法 的 ， 但 在 大 多 数 时 候 这 种 监控 需要 事先 告 
之 通话 双方 。 个 人 通话 ， 在 被 认定 为 私人 通话 的 情况 下 ， 是 不 可 以 被 
监控 的 。 然 而 ， 如 果 公 司 没 有 明确 规定 工作 时 不 可 以 进行 个 人 通话 ， 
那么 雇员 的 个 人 通话 加 有 被 监控 的 风险 。 


2010 年 6 月 ， 美 国 最 高 法 院 在 安大略 市 诉 杰 夫 : 库 昂 一 案 (美国 最 
高 法 院 判 例 汇编 索引 号 : 130 S.Ct. 2619, 560 U.S.) 中 判定 ， 在 工作 相 
关 的 背景 下 对 警 局 分 配给 警 员 呼 机 上 的 信息 实施 搜查 是 合法 的 。 在 这 
个 案件 中 ， 城 市 管理 部 门 试图 通过 对 日 常 使 用 情况 的 调查 来 决定 是 否 
修改 与 寻呼机 提供 商 签订 的 无 线 合约 ， 并 因此 获取 了 一 份 杰 夫 : 库 昂 的 


HG BABE fa BASE Of AR ° RAR AY a ee Se 96 
法 第 四 修正 案 中 关于 政府 搜查 公务 员 的 电子 通信 记录 的 规定 。 尽 管 这 
个 案件 和 此 次 判决 的 结果 可 能 对 公务 员 的 隐私 空间 界定 产生 了 一 定 的 
影响 ， 但 当 雇主 是 私 彰 业 主 时 ， 此 类 案件 在 有 关 隐 私 权 的 问题 上 仍然 


没有 定论 。 


对 于 雇员 来 说 ， 雇 主 对 他 们 的 某 些 监视 如 果 和 一 定 的 利益 或 者 加 
薪 挂 钩 ， 可 能 会 更 好 接受 一 些 。 对 于 这 样 的 系统 ， 一 个 重要 的 要 素 是 
透明 : 采集 和 分 析 数 据 的 方法 要 解释 清楚 ， 得 出 的 结果 要 给 予 员 工 反 
对 和 申诉 的 权利 。 比 如 第 二 章 中 提 到 的 健康 激励 系统 ， 一 个 合适 的 员 
工 监控 系统 的 输出 结 采 应 该 只 用 于 激励 员工 而 不 是 用 于 处 罚 他 们 。 


然而 ， 知 易 行 难 ， 职 位 的 上 升 和 工资 上 调 等 方面 的 不 一 致 经 常 是 
公司 中 争论 的 焦点 ， 远 比 每 个 员工 卫生 保健 费用 的 差别 更 受 关注 。 另 
外 ， 研 究 这 些 员 工 数据 远 比 健康 激励 系统 所 用 的 直截了当 的 方法 要 复 
杂 得 多 。 例 如 ， 健 康 激 励 系统 可 以 根据 一 个 人 每 个 月 所 走 的 步 数 ， 相 
应 地 降低 一 定量 的 健康 保险 费用 。 一 个 最 好 的 提高 员工 工作 效率 的 方 
法 是 提高 他 们 对 工作 空间 的 满意 度 ， 但 如 采 雇 主 侵犯 了 员工 的 权利 和 
隐私 ， 则 所 有 的 努力 都 有 可 能 适得其反 。 


建设 更 美好 社区 


当 从 社区 层面 考虑 采集 数据 ， 则 会 遇 上 完全 不 同 的 挑战 和 机 遇 。 
这 些 项 目 一 般 是 基于 具有 一 定 同 质 性 的 群体 来 开展 的 ， 比 如 大 学 生 和 
教授 ， 这 样 的 数据 采集 项 目 ， 往 往 在 地 理 范 围 上 被 限制 在 大 学 的 附 
近 。 然 而 ， 这 些 项 目 提出 了 可 以 提升 参与 度 的 潜在 应 用 和 激励 方案 。 
在 一 些 项 目 中 ,研究 人 员 以 及 一 些 公司 利用 人 们 想 要 创造 出 一 个 更 宜 
大 的 社区 的 愿望 ， 来 克服 参与 者 不 情愿 分 译 个 人 信息 的 情况 ， 这 个 办 
法 在 一 些 情况 中 还 十 很 有 效 的 。 


英特尔 和 加 利 福 尼 亚 大 学 的 研究 实验 室 探 索 了 一 种 新 的 方法 ， 根 
据 便携 的 个 人 空气 质量 传 感 絮 追 踩 到 的 数据 来 绘制 污染 状况 分 布 图 。 
这 一 项 目的 名 称 叫 作 “常识 "， 通 过 个 人 和 集聚 的 人 群 的 曝光 来 采集 数 
据 。 以 迎合 人 们 调 望 改善 目 身 健康 状况 以 及 周边 环境 愿望 的 这 样 一 种 
方式 ， 人 研究 人 员 说 服 了 参与 者 通过 目 己 的 手机 分 吾 位 置信 息 ， 以 及 分 
亨通 过 穿戴 式 传 感 设备 追踪 的 一 氧化 碳 、 气 氧化 合 物 、 具 氧 层 以 及 光 
线 、 瘟 度 、 湿 度 和 空间 方位 等 一 系列 信息 。 这 种 采集 的 结 采 可 以 帮助 
社会 活动 家 动员 社会 群体 有 的 放 矢 地 行动 起 来 。 


但 是 ， 要 将 这 样 的 应 用 推广 到 更 多 的 人 群 可 能 还 需要 几 年 时 间 。 
主要 的 挑战 是 ， 将 大 多 数 环境 传 感 莫 集成 在 手机 上 这 样 的 做 法 缺乏 大 
规模 市 场 需求 ， 因 此 很 难 畅 销 。 男 外 还 有 个 挑战 是 ， 由 于 采集 数据 的 
手机 不 同 ， 如 何 保 持 数 据 的 “清洁 ?也 是 一 个 问题 。 因 此 ， 在 这 类 数据 
采集 上 的 丙 业 笑 试 ， 最 可 能 需要 的 是 ， 使 用 不 贵 、 不 引信 注目 、 带 有 
蓝牙 功能 且 可 以 和 用 户 移 动 设备 连接 的 外 部 传 感 咒 。 


由 德 博 拉 . 埃 斯 特 林 主 持 的 一 些 在 UCLA (加 州 大 学 洛杉矶 分 校 ) 
开展 的 研究 项 目 ， 探 索 了 这 类 只 通过 手机 在 社区 层面 采集 数据 的 方 
法 。 愉 好， 这 些 猴 有 摄像 尖 和 GPS 的 手机 非常 有 可 能 为 改 矢 社区 做 得 
更 多 。 实 际 上 ， 把 UCLA 的 一 些 项 目 参 数 进 行 整合 的 想法 ， 在 众多 创 
业 公司 都 在 开发 类 似 的 手机 应 用 的 当下 ， 正 好 迎合 了 大 众 的 需要 。 


其 中 有 一 个 叫 作 “个 人 环境 影响 报告 * 的 项 目 ， 利 用 安全 地 定期 上 
传 到 远程 服务 器 上 的 数据 癌 人 们 提供 环境 影响 和 环境 暴露 水 平 的 信息 
2) 。 通 过 分 析 用 户 的 位 置 轨迹 ， 还 有 加 利 福 尼 亚 州 数 以 千 计 的 社区 的 
天 气 状况 、 佑 算 交 通 模式 等 数据 ， 系 统 可 以 生成 一 份 报告 ， 估 算 参 与 
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还 可 以 通过 参与 者 所 开 的 车 ， 来 评估 一 个 人 的 碳 影响 以 及 他 对 学 校 和 
医院 这 类 敏感 地 点 的 影响 。 


另外 一 个 UCLA 的 项 目 让 参与 者 通过 手机 报告 大 学 校园 里 未 被 归 
置 的 垃圾 的 情况 ， 该 项 目 说 明了 人 们 在 社区 层面 分 译 数据 的 并 在 好 
处 。 在 这 个 项 目 中 ， 大 学 生 被 闻 励 将 校园 中 垃圾 桶 里 的 内 容 用 手机 拍 
照 ， 以 便 确 定 回收 垃圾 桶 应 该 如 何 布置 才能 获得 最 高 的 使 用 效率 。 


手机 在 UCLA 还 被 用 来 寻找 更 好 的 目 行 车 通勤 路 径 。 一 个 名 为 
Biketastic 的 项 目 ， 通 过 GPS 轨 迹 采 集 骑 车 人 路 径 ， 以 及 通过 加 速 右 的 
数据 来 记录 路 面 粗糙 程度 并 使 用 声音 数据 来 帮助 判断 交通 状况 或 道路 
施工 情况 。 当 和 空气 质量 、 时 间 敏 感 的 交通 数据 以 及 交通 事故 等 其 他 
数据 集结 合 起 来 时 ， 人 们 就 可 以 全 面 、 清 晰 地 了 解 一 条 目 行 车 通勤 路 
径 的 情况 了 。 


声 景 监视 


正如 许多 UCLA 的 项 目 所 证 实 的 那样 ， 手 机 上 大 量 的 传 感 硕 使 其 
非常 适合 作为 环境 监测 终端 。 但 一 份 测 单 、 连 续 地 采集 所 获得 的 音频 
文件 同样 可 以 很 有 用 。2010 年 ，Arbitron 股 份 有 限 公司 取得 了 IMMI 的 
技术 文件 、 专 利 权 以 及 IMMI 的 商标 名 称 并 将 其 改名 为 Audience 
Measurement Technologies。IMMI 使 用 周围 环境 的 音频 来 鉴别 人 们 正在 
使 用 的 媒体 类 型 。IMMI 直 接 与 尼尔森 媒体 研究 公司 竞争 ， 试 图 了 解 所 
有 形式 的 媒体 ， 从 电影 、 收 音 机 、 游 戏 到 MP3 (一 种 音乐 文件 播放 
at) 、 电 视 ， 以 及 网 络 。 这 一 技术 通过 手机 或 个 人 电脑 上 的 录音 工具 
来 实现 。 该 孙 音 工具 在 一 分 钟 内 数 次 记录 声音 片段 ， 并 与 声音 数据 库 
中 的 信号 进行 对 比 。 该 技术 不 需要 用 户 的 主观 参与 ， 因 此 可 以 提供 一 
个 无 偏见 的 个 人 声 景 样本 。 它 可 以 在 用 户 注 册 使 用 该 服务 时 ， 交 叉 引 
用 个 人 信息 来 提供 个 人 听力 习惯 的 实时 报告 。 


已 经 有 超过 一 万 人 同意 使 用 IMMI 的 技术 。 尽 管 这 一 群体 规模 使 得 
IMMI 的 技术 超出 了 本 章 小 规模 群体 的 范畴 ， 但 其 客户 端 采 集 数据 的 基 


本 方法 ， 以 及 它 所 采集 的 数据 并 不 是 关联 到 匿名 用 户 或 是 某 个 群体 的 
平均 值 ， 而 是 关联 到 一 个 可 识别 的 个 人 这 个 事实 ， 使 得 它 很 适合 用 于 
在 相对 小 规模 的 群体 中 采集 数据 。 


当 一 个 人 决定 使 用 IMMI 的 技术 时 ， 他 需要 将 其 下 载 至 目 己 的 手机 
或 个 人 电脑 上 ， 或 接受 IMMI 提 供 的 预 半 该 数据 采集 技术 的 智能 手机 。 
每 隔 几 分 钟 ， 他 的 设备 会 采集 一 份 音频 样本 ， 紧 接着 音频 会 被 转换 为 
数字 信号 ， 之 后 再 传输 至 该 公司 的 服务 器。IMMI 公 司 的 服务 右 根 据 监 
控 的 各 类 媒体 ， 如 商业 广告 、 预 告 片 、 电 影 和 首 乐 ， 计 算 形成 各 种 媒 
体 的 目标 内 容 文件 ， 如 果 手 机 传 来 的 数字 信和 号 与 IMMI 公 司 服务 器 中 的 
言 号 相符 ， 用 户 所 使 用 的 巡 体 就 可 以 被 识别 出 来 。 信 和 号 匹配 的 过 程 只 
需要 几 秒 钟 。 


在 个 人 隐私 方面 ， 该 公司 宣称 ， 语 音 通话 以 及 其 他 非 媒 体 的 声音 
会 被 过 滤 挥 。 因 为 音频 信号 会 立刻 转换 为 数字 信和 号， 而 这 些 数 子 信号 
征 已 经 与 预先 识别 过 的 媒体 信号 进行 匹配 过 的 ， 因 此 该 公司 没有 理由 
也 不 具备 分 析 其 他 音频 的 方法 ， 这 些 不 被 识别 的 音频 包括 对 话 以 及 街 
道 的 声音 等 。 而 且 在 这 一 技术 的 具体 应 用 中 还 有 一 个 关键 点 : IMMI 问 
接受 预 装 软 件 的 手机 用 户 提 供 设备 和 服务 补贴 。 这 至 少 对 于 一 部 分 人 
来 说 ， 足 够 消除 他 们 对 于 该 技术 可 能 监听 目 己 的 生活 的 顾 虚 了。 


IMMI 的 技术 现在 属于 Arbitron 公 司 ， 后 者 人 研发 了 便携 式 人 员 收 视 
测量 仪 ， 该 设备 只 有 一 张 纸 的 大 小 ， 用 于 监测 电视 广播 信号 中 人 耳 不 
可 闻 的 音调 。 当 这 些 信号 被 监测 到 时 ， 它 们 会 被 无 线 传 输 到 Arbitron 的 
服务 姻 。 这 种 便携 式 人 员 收 视 测 量 仪 现在 已 经 在 加 拿 大 、 冰 岛 、 挪 
威 、 瑞 典 、 上 丹麦、 比利时 和 哈 院 殉 斯 坦 等 国家 得 到 应 用 ， 而 其 音频 编 
码 技术 则 在 新 加 坡 获 得 了 使 用 许可 。 


对 小 规模 群体 的 数据 采集 来 说 ， 最 大 挑战 在 于 寻找 合适 的 激励 方 
式 长 励 人 们 参与 ， 特 别 是 在 个 人 能 够 轻易 地 直接 获得 目 己 所 产生 的 数 
据 的 情况 下 。 智能 会 议 标识 卡 的 发 展 可 能 受制 于 经 济 成 本 ， 但 工作 场 


所 和 社区 具有 使 用 “现实 挖掘 ?技术 的 可 能 性 ， 通 过 这 些 技术 可 以 更 好 
地 把 握 人 人们 的 实际 工作 和 日 党 表现。 而 且 ， 如 采 在 社区 中 分 至 数据 的 
好 处 可 以 被 高 效 地 交流 和 展示 ， 很 有 可 能 会 有 更 多 的 人 愿意 接受 某 些 
特定 形式 的 数据 共 至 。 


IMMI 偶 然 发 现 了 让 人 们 分 至 他 们 所 处 环境 的 私人 首 频 的 方法 :他 
们 提供 免费 的 智能 手机 ， 并 承诺 私人 对 话 会 被 排除 在 数据 采集 外 。 但 
实际 上 ， 人 们 可 能 需要 对 这 种 方式 的 成 本 效益 进行 更 深入 的 研究 。 特 
别 是 ， 曾 有 一 个 研究 发 现 ， 学 生 们 为 了 获得 平均 约 10 英 镑 的 补贴 而 愿 
意 分 享 自己 的 位 置信 息 (通过 他 们 的 手机 ) 。 经 常 离开 学 校 的 学 生 认 
为 他 们 的 隐私 更 有 价值 ， 相 比 那些 只 在 学 校 附近 活动 的 学 生 ， 他 们 过 
要 的 补贴 更 高 。 这 一 研究 表明 ， 人 们 确实 会 为 目 己 的 位 置 数据 估价 ， 
而 且 这 一 价值 的 融 低 取决 于 一 些 特定 的 因素 ， 比 如 移动 性 。 


研究 人 员 和 商人 需要 更 加 重视 个 人 数据 的 价值 并 做 出 相应 的 补 
途 。 考 虑 到 人 们 固有 的 隐私 顾虑 ， 开 展 研究 的 群体 规模 是 个 微妙 的 因 
素 ， 但 合适 的 规模 也 可 以 让 大 量 应 用 获取 人 负责 任 的 参与 者 。 


1. “环境 暴露 水 平 是 指 人 群 接触 某 个 环境 因素 的 浓度 或 剂量 。 一 一 译 者 注 


第 四 章 
数据 价值 如 何 落地 ? 


正如 第 二 章 中 提 到 的 ， 目 前 已 有 很 多 方法 可 以 利用 个 人 数据 来 开 
发 系统 和 工具 ， 以 帮助 个 人 实现 目 己 的 目标 ， 或 过 上 更 健康 的 生活 。 
这 一 章 我 们 将 介绍 小 规模 群体 的 数据 是 如 何 被 用 于 提升 个 人 的 工作 效 
率 、 改 善 其 健康 状况 ， 促 进 更 多 有 效 的 群体 互动 ， 以 及 建设 更 健康 更 
宜 居 的 社区 的 。 利 用 小 规模 群体 数据 ， 工 程 师 可 以 更 簿 单 地 识别 有 意 
义 的 或 偶然 的 人 际 关 系 、 事 件 以 及 人 们 所 处 的 环境 ， 这 些 可 以 帮助 公 
司 管理 者 、 积 极 的 市 民 、 健 康 产 品 提 供 商 以 及 当地 政府 官员 更 好 地 决 
策 。 


在 这 个 规模 上 ， 社 交 网 络 中 的 联盟 和 层级 划分 现象 就 变 得 十 分 清 
蜥 ， 而 且 有 助 于 人 们 理解 群体 行为 。 但 这 些 观察 只 有 在 涉及 具体 行动 
时 其 关联 性 才 最 强 ， 才 有 用 ， 比 如 让 一 个 机 构 运行 得 更 平稳 ， 或 者 让 
一 个 社区 变 得 更 宜 居 。 因 此 ， 不 把 它 限 制 在 观察 科学 的 范畴 中 这 一 点 
很 重要 ， 设 计 更 好 的 机 构 和 社区 从 根本 上 来 说 还 是 要 落实 到 实践 。 当 
然 ， 设 计 一 个 能 够 合理 激励 人 们 分 序数 据 的 系统 会 是 一 个 挑战 ， 它 需 
要 能 够 让 人 们 放心 地 分 享 目 己 产生 的 数据 ， 而 且 在 特定 的 人 群 能 够 获 
取 这 些 数据 时 ， 人 们 不 会 感受 到 威胁 。 


让 人 高 兴 的 是 ， 很 多 公司 和 人 研究 人 员 都 在 开发 这 样 的 应 用 。 例 如 
第 三 章 中 提 到 的 Tacit 公 司 开发 的 知识 中 介 系 统 ， 这 种 系统 分 析 员 工 的 
工作 和 沟通 行为 ， 帮 助 他 们 与 同事 建立 新 的 联系 。 通 过 一 个 叫 作 
Serendipity 的 手机 应 用 ， 它 用 相似 的 原则 可 以 在 正式 会 议 或 私人 约会 
的 情境 中 帮助 人 们 相互 结识 。 但 关键 是 要 你 障 每 个 人 的 隐私 ， 这 些 系 


统 只 能 使 人 们 更 容易 结识 新 人 ， 而 不 是 以 个 人 的 隐私 或 安全 为 代价 ， 
强迫 人 们 相互 结识 。 


从 工作 场所 的 数据 转 辐 社区 层面 的 数据 ， 可 以 从 相对 小 规模 的 天 
心 改善 社区 层面 生活 质量 的 当地 居民 入 手 ， 利 用 他 们 提供 的 数据 。 在 
第 三 革 中 我 们 也 介绍 过 ，UCLA 开 展 了 一 系列 关于 参与 式 感 知 的 项 
目 ， 让 市 民 能 够 监控 空气 污染 水 平 ， 比 如 一 个 可 以 标示 出 哪些 道路 对 
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但 更 有 意思 的 是 那些 已 经 从 实验 室 走 出 来 ， 投 入 商业 应 用 ， 使 用 
的 规模 扩张 到 了 数 千 人 的 参与 感知 方式 的 项 目 。 例 如 纽约 大 学 衍生 公 
司 的 Noah 项 目 ， 让 市 民 科 学 家 为 他 们 所 观察 到 的 生物 体 拍摄 市 有 地 理 
标签 和 时 间 戳 记 的 照片 并 对 其 做 笔记 ， 经 过 一 段 时 间 的 积累 ， 就 可 以 
为 当地 生态 系统 的 健康 状况 提供 简况 信息 。 另 外 一 个 手机 应 用 
CitySourced， 则 是 让 人 们 将 拍摄 到 的 城市 衰败 区 域 的 照片 发 送 到 各 和 目 
的 市 政 厅 ， 这 些 照片 同样 带 有 地 理 标签 和 时 间 崔 记 。CitySourced 是 一 
系列 可 用 ， 且 已 经 被 整合 到 城市 工作 流程 系统 和 城市 311 电 热线 (GE 
紧急 事件 ) 中 的 应 用 之 一 ， 人 们 可 以 直接 把 自己 采集 到 的 数据 分 享 给 
能 够 解决 该 问题 的 政府 工作 人 员 。 


对 于 社区 来 说 ， 如 果 没 有 被 该 系统 成 功 激励 而 愿意 提供 潜在 敏感 
信息 的 这 部 分 大 民主 动 提供 潜在 的 有 价值 信息 ， 这 些 参与 式 感知 系统 
下 没有 价值 。 随 着 这 类 数据 分 译 激 励 机 制 被 日 益 优化 ， 这 样 的 系统 会 
在 塑造 和 维持 我 们 工作 、 生 活 的 场所 的 行动 中 扮演 着 越 来 越 重要 的 角 
色 。 


本 章 关 注 的 是 这 些 本 地 应 用 程序 的 潜能 ， 包 括 让 设计 者 说 服 人 们 
参与 其 中 ， 并 保障 他 们 隐私 的 一 些 重 要 技术 。 在 一 些 案 例 中 ， 鼓 励 人 
们 参与 的 动机 是 明显 提高 的 工作 效率 以 及 团队 合作 效率 ， 并 且 提 供给 
第 三 方 的 私人 数据 可 以 使 用 。 在 另 一 些 案 例 中 ， 设 计 者 将 博弈 论 的 元 


素 融 合 到 他 们 的 应 用 中 ， 让 人 们 在 参与 中 获得 成 束 感 。 当 参与 其 中 的 
好 处 显而易见 ， 而 隐私 又 能 很 好 地 被 保护 时 ， 人 们 束 变 得 更 加 愿意 分 
圣 个 人 数据 ， 从 而 使 他 们 的 工作 空间 和 社区 对 自己 、 对 同事 、 对 附近 
居民 来 说 都 变 得 更 好 。 


什 交 网 络 的 介入 


Tacit 征 一 家 将 目 己 的 软件 标榜 为 知识 中 介 系 统 的 公司 ， 该 公司 的 
软件 从 员工 发 送出 的 电子 邮件 中 搜集 私人 细 广 。 这 些 细 市 ， 包 括 收 件 
人 信息 、 附 件 的 内 容 、 电 子 邮 件 本 喘 的 用 词 ， 被 用 来 推断 员工 的 社交 
网 络 、 知 识 以 及 兴趣 。 因 为 Tacit 使 用 的 这 种 数据 采集 方法 会 让 员工 反 
感 ， 所 以 该 软件 十 基于 严格 并 且 透 明 的 隐私 控制 规则 来 设计 的 。 所 有 
信息 都 被 加 密 ， 这 意味 着 公司 内 的 任何 人 都 不 可 能 看 到 关于 员工 个 人 
的 兴趣 以 及 社会 联系 的 分 析 ， 即 使 是 撤 术 总 监 和 CEO 也 不 例外 。 同 
样 ，Tacit 公 司 的 其 他 任何 人 也 都 无 法 获取 这 些 信 息 。 仅 在 有 法 院 指令 
的 情况 下 ，Tacit 公 司 才 会 公布 这 些 敏感 数据 ， 并 且 想 要 获取 这 些 数 据 
需要 Tacit 公 司 以 及 使 用 该 系统 的 公司 同时 提供 密 钥 。 


那么 ， 这 具体 是 如 何 操作 的 呢 ? 该 软件 只 有 在 所 有 参与 方 都 授权 
的 情况 下 ， 才 能 显示 关系 信息 。 比 如 ， 假 设 罗 杰 认 为 他 正在 做 的 项 目 
和 公司 的 其 他 项 目 相关 ， 但 他 不 知道 是 哪 几 个 项 目 ， 也 不 知道 谁 参与 
了 那些 项 目 。 罗 态 可 以 给 不 同 的 人 发 送 电 子 邮件 ， 描 述 他 正在 进行 的 
项 目 并 询问 他 们 有 是否 知 道 一 些 类 似 的 项 目 信息 ;如果 知道 的 话 ， 他 们 
可 不 可 以 回 那 些 了 解 类 似 项 目的 人 引 厦 罗 杰 。 或 者 他 也 可 以 直接 通过 
知识 中 介 系 统 查询 。 该 系统 会 持续 地 搜索 与 各 种 主题 和 项 目 分 别 相关 
的 人 ， 并 私下 询问 符合 条 件 的 人 是 否 愿 意 与 罗 杰 结 识 ， 并 和 他 讨论 项 
目 。 尽 管 罗 杰 在 局 动 搜索 的 时 候 表明 了 目 己 的 喘 份 ， 但 只 有 接受 了 该 


询问 的 人 才 会 被 真正 介绍 给 他 ， 其 他 没有 接受 询问 的 人 仍然 维持 匿名 
的 状态 。 


这 一 系统 的 理念 是 让 分 译 知 识 、 兴 趣 和 建立 社交 关系 变 得 更 加 全 
利 ， 以 提高 工作 场所 的 效率 。 帮 助 建立 新 社交 关系 的 系统 是 传统 知识 
管理 系统 的 改进 版 ， 传 统 的 知识 管理 系统 一 般 主要 用 于 文档 的 分 析 、 
编目 以 及 分 类 ， 它 通常 距离 实现 真正 的 知识 和 关系 创建 仅 一 步 之 站 。 
像 Tacit 这 样 的 目 动 系统 ， 可 以 在 人 们 需要 使 用 专门 知识 以 及 人 际 天 系 
时 目 动 在 系统 中 被 发 掘 出 来 ， 同 时 ， 该 系统 还 为 那些 不 愿 公开 数据 的 
人 留 有 选择 保密 的 权利 。 


左 省 理工 学 院 在 2004 年 开展 的 Serendipity 项 目 和 Tacit 系 统 有 点 相 
似 ， 它 们 都 是 通过 一 个 外 部 系统 为 人 们 提供 中 介 服 务 。 和 麻 省 理工 学 
院 早 先 的 “现实 控 据 ”项目 一 样 ，Serendipity 项 目 使 用 从 参与 者 手机 上 采 
集 到 的 数据 ， 试 图 让 拥有 相同 兴趣 的 卫生 人 在 空间 距离 上 相对 接近 的 
时 候 有 相互 认识 的 可 能 性 。 尽 管 ， 他 们 最 开始 的 想法 是 在 大 公司 或 大 
型 会 议 上 使 用 Serendipity , 将 其 作为 交流 的 媒介 ， 这 个 理念 之 后 还 催 
生 了 一 家 叫 作 MetroSpark 的 手机 交友 公司 的 产生 。 


MetroSpark 公 司 要 求 用 户 在 注册 的 时 候 提供 天 于 自己 的 信息 ， 并 
且 按 照 重 要 性 对 不 同 兴 趣 进 行 权 衡 。 根 据 这 些 信息 以 及 兴趣 衡量 结 
果 ， 系 统 会 计算 “相似 分 ”。 如 果 用 户 同意 ，MetroSpark 公 司 会 通过 用 
户 手 机 上 的 软件 ， 对 其 行为 进行 推断 来 采集 更 多 的 间接 信息 ， 比 如 用 
户 的 睡眠 上 时间、 经 常 去 的 地 方 、 社 交 关 系 ， 甚 至 手机 上 的 游戏 和 其 他 
应 用 程序 的 使 用 情况 。 另 外 ， 用 户 也 可 以 选择 他 们 想 要 结识 的 人 的 类 
型 。 所 有 这 些 信息 组 成 用 户 的 个 人 资料 ， 并 存储 在 中 央 服 务 器 中 。 


用 户 可 以 目 行 设置 相似 分 的 临界 值 ， 当 两 个 用 户 之 间 的 距离 在 蓝 
下 传输 的 范围 之 内 ， 并 且 如 采 他 们 的 相似 分 都 高 于 彼此 目 行 设 定 的 临 
界 值 ， 那 么 服务 右 会 分 别提 醒 这 两 个 用 户 ， 在 他 们 附近 有 个 与 目 己 兴 
趣 相 投 的 人 。 考 虑 到 隐私 和 社区 礼仪 的 问题 ， 系 统 会 通过 发 送 短信 提 


RRA, SAA ee SS AMET ° SHAR A SA eB ae PE 
了 “是 ”， 系 统 会 把 对 方 的 照片 以 及 一 系列 聊天 话题 发 送 到 双方 的 手机 
ke 


还 有 许多 与 MetroSpark 相 似 的 地 理 社 交 应 用 程序 ， 比 如 ，Grindr 是 
一 和 以 男 同 性 恋 为 目标 人 群 的 移动 约会 应 用 ， 还 有 Blendr 一 个 目 
标 是 介绍 具有 不 同人 口 统计 特征 (如 职业 、 人 种 、 文 化 程度 等 ) 的 陌 
生 人 相互 认识 的 手机 应 用 。 使 用 此 类 程序 的 用 户 可 以 上 传 并 更 新 目 己 
的 照片 和 个 人 信息 。 以 Blendr 为 例 ， 用 户 可 以 扫描 附近 的 用 户 信 息 
(准确 的 位 置信 息 是 被 隐藏 的 ， 并 且 标 记 他 们 感 兴趣 的 用 户 。 当 一 个 
用 户 标 记 了 男 一 个 用 户 ， 而 对 方 同时 也 标记 了 了 他， 那么 这 两 个 人 就 可 
以 通过 该 程序 直接 交谈 。 


不 入 的 是 ， 不 是 所 有 的 软件 开发 人 员 在 编写 软件 时 ， 都 考虑 了 用 
户 的 双亲 授权。 我 身边 的 女孩 (Girls Around Me) 就 是 一 个 不 需要 用 
户 授 权 的 应 用 程序 ， 它 很 容易 被 匿名 且 有 时 是 “ 斥 夺 性 ”的 行为 外 了 空 
子 。 这 个 为 iPhone 设计 的 应 用 程序 直接 从 脸谱 网 上 链接 个 人 公开 信 
息 ， 又 从 Foursquare 上 获取 实时 位 置信 息 ， 并 把 这 些 信息 都 放 在 一 个 可 
以 被 轻易 搜索 到 的 地 图 上 。 在 不 需要 任何 授权 的 情况 下 ， 人 们 就 可 以 
通过 这 个 应 用 程序 搜索 一 定 的 区 域 ， 并 看 到 那些 将 相关 信息 在 线 显示 
的 用 户 ， 他 们 的 上 照片、 关系 状态 、 兴 趣 以 及 精确 的 位 置信 息 ， 但 这 些 
用 户 本 导 可 能 并 不 知道 这 些 内 容 是 对 所 有 用 户 公 开 的 。 本 质 上 ， 这 个 
应 用 程序 就 是 在 用 户 不 知情 ， 且 没有 明确 授权 的 情况 下 ， 组 合用 户 的 
个 人 信息 细节 以 及 他 们 的 具体 地 理 位 置 。 因 此 2012 年 苹果 在 线 商 店 将 
之 下 线 。Foursquare 公 司 也 引用 “不 允许 整合 不 同 站 点 的 信息 ， 以 防 对 
一 系列 地 点 信息 进行 不 恰当 的 浏览 ”的 政策 条 丈 ， 拒 绝 “ 我 喘 边 的 女 
孩 ” 访 问 其 应 用 程序 接口 (aPi) 。 


脸谱 网 的 隐私 政策 经 名 更 新 ， 而 且 使 用 起 来 也 有 很 多 不 明确 的 地 
方 ， 程 序 开发 者 们 半 毅 外 这 个 空子 ， 从 而 导致 很 多 用 户 的 个 人 信息 意 


外 港 露 。 相 反 ，Metrospark、Tacit、Grindr 和 Blendr 这 些 软 件 则 需要 用 
户 的 授权 才 可 以 分 吝 个 人 信息 ， 或 提供 中 介 介 绍 。 然 而 ， 这 些 服 务 都 
存在 于 隐私 的 灰色 地 带 ， 致 使 很 多 理智 的 用 户 觉得 不 和 舒服， 因而 不 会 
选择 使 用 它们 。 在 这 个 领域 ， 软 件 设 计 必 须 仔 细 考 虑 ， 而 且 在 推广 中 
保持 透明 也 是 至 关 重 要 的 。 


任 区 笔记 的 页 献 


对 于 社区 层面 上 的 数据 采集 ， 地 理 位 置信 息 附 带 上 其 他 传感器 所 
采集 的 信息 ， 比 如 相机 或 加 速 计 ， 即 使 只 有 一 种 ， 都 有 可 能 带 来 巨大 
的 利益 。 当 社区 成 员 采 集 这 些 “ 协 变量 * 并 在 地 图 上 将 其 标记 在 特定 的 
位 置 时 ， 他 们 很 可 能 发 据 出 自己 社区 中 一 些 隐藏 的 特性 ， 这 些 特性 则 
强 含 着 帮助 改善 所 有 人 生活 质量 的 潜在 可 能 。 这 种 类 型 的 社区 数据 采 
集 相 比 公司 中 的 数据 采集 有 一 个 明显 的 优势 : 你 不 需要 说 服 所 有 人 参 
与 束 能 获得 有 用 的 信息 ， 不 像 组 织 机 构 往 往 需 要 完整 的 社交 图 谱 才 是 
最 理想 的 。 


Noah 项 目 让 人 们 拍摄 市 有 地 理 标 镁 和 时 间 鹤 记 的 植物 、 动 物 和 茵 
类 的 照片 ， 并 将 它们 上 传 到 一 个 在 线 生 物体 数据 库 。 该 数据 库 所 在 的 
网 站 提供 了 一 个 可 供用 户 搜 索 的 地 图 ， 而 在 该 项 目 示 来 的 更 新 中 ， 将 
会 允许 人 们 创建 他 们 自己 的 社区 生态 系统 ， 以 便 学 生 和 当地 的 野 乌 观 
察 家 查阅 当地 的 生态 信息 。Noah 项 目 设置 特定 的 任务 吸引 用 户 参 与 ， 
这 些 任务 一 般 是 采集 特定 物种 的 照片 和 信息 ， 在 完成 任务 时 ， 用 户 可 
以 根据 目 己 的 贡献 程度 赚 取 类 似 功 绩 勋 章 的 虚拟 土地 。 


Noah 项 目 将 现实 社区 和 在 线 社 区 连接 在 一 起 ， 让 人 们 了 解 一 定 区 
域内 一 段 时 间 中 的 生态 系统 的 健康 状况 。 这 些 数 据 现在 被 业余 爱好 者 
和 仇 利 诺 伊 大 学 之 加 哥 分校 以 及 康 奈 尔 大 学 的 科学 家 使 用 ， 分 别 作 为 
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种 ， 追 踩 入 侵 物 种 ， 可 以 作为 生态 系统 整体 健康 的 指标 。 


Noah 项 目 关 注 的 是 整个 社区 的 生态 健康 ， 然 而 还 有 其 他 很 多 移动 
手机 应 用 则 是 让 用 户 报告 社区 中 人 工 环 境 的 生态 健康 状况 。 
CitySourced,SeeClickFix,FixMyStreet 以 及 其 他 很 多 移动 手机 应 用 都 允许 
用 户 发 送 舍 有 地 理 标 签 、 时 间 戳 记 并 且 被 预 分 类 过 的 照片 给 市 政府 。 
在 一 些 和 案例 中 ， 这 些 应 用 程序 直接 和 城市 后 勤 部 门 的 工作 流 系统 相连 
接 ， 并 且 会 自动 生成 工作 指令 或 路 线 投诉 发 送 给 警察 局 ， 这 意味 着 可 
以 更 快 更 有 效 地 实现 修补 路 面 的 坑 注 或 清除 涂鸦 。 


让 城市 管理 者 、 首 席 信 息 官 以 及 市 长 文 持 这 类 计划 并 不 困难 。 对 
市 民有 好 处 的 对 于 政治 来 说 也 是 好 的 。 而 这 些 应 用 程序 中 最 成 功 的 那 
几 个 ， 都 征 由 那些 致力 于 将 他 们 的 软件 芭 密 整合 到 城市 现存 的 基础 设 
施 中 的 公司 所 开发 的 ， 所 以 不 需要 在 升级 现 有 的 信息 技术 上 文 出 太 


多 。 


实际 上 ， 一 些 市 政府 是 这 方面 的 先驱 ， 它 们 开始 自行 开发 应 用 程 
序 。 在 加 利 福 尼 亚 州 圣何塞 市 的 “圣何塞 311” 系 统 是 由 CitySourced 公 司 
开发 的 ， 该 系统 让 这 个 小 公司 迅速 地 发 展 起 来 。 同 样 的 ， 旧 金山 市 将 
城市 数据 适当 地 对 公众 开放 ， 包 括 街 道 清 洁 计 划 、 俘 车 信息 还 有 再 生 
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机 应 用 和 网 站 的 发 展 。 


对 于 城市 管理 者 和 应 用 开发 人 员 来 说 ， 他 们 现在 之 所 以 能 够 方便 
地 合作 ， 都 要 归功 于 一 个 名 为 Open311 的 初创 企业 ， 它 是 由 纽约 市 的 
非 介 利 组 织 OpenPlans 开 发 的 。 其 目标 是 建立 一 个 开放 和 平台， 让 城市 可 
以 利用 现 有 的 基础 设施 来 发 布 城市 信息 ， 以 便 开 发 网 站 和 移动 应 用 。 


在 这 一 氮 上 ， 大 多 数 这 类 服务 都 允许 用 户 匿名 报告 城市 问题 ， 服 
务 器 只 能 获取 他 们 的 位 置 。 因 为 这 项 服务 的 收益 一 一 一 个 更 清洁 的 社 
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很 多 的 人 愿意 使 用 这 些 服务 。 然 而 这 些 应 用 程序 的 后 续 版 本 可 能 向 用 
户 注 册 并 录入 更 多 个 人 信息 的 选择 。 这 样 可 以 让 用 户 更 方便 地 获得 针 
对 他 们 所 投诉 问题 的 反馈 ， 也 可 以 在 社区 有 活动 时 获得 通知 ， 还 可 以 
参与 一 些 游戏 和 竞赛 。 


智能 手机 还 可 能 通过 另外 一 个 途径 来 改善 社区 健康 状况 ， 即 让 人 
们 与 同一 区 域内 的 其 他 人 共享 目 己 跑步 、 骑 行 以 及 通勤 的 路 径 。 从 21 
世纪 中 期 开始 ， 有 许多 网 站 已 经 提供 了 可 以 根据 位 置 和 距离 搜索 的 由 
用 户 生 成 的 跑步 和 骑 行 路 人 径 。 Mapmyrun.com, Mapmyride.com, 
Walkjogrun.net, bikely, Runkeeper, Runtastic 和 DailyMile.com 都 被 广泛 地 
用 来 分 享 和 寻找 路 径 。 这 些 路 径 的 数据 既 可 以 通过 手动 添加 ， 也 可 以 
通过 珊 有 GPS 心 片 的 设备 上 传 。 很 多 这 类 应 用 都 可 以 让 用 户 很 容易 地 
分 享 由 iPhone 和 安 卓 设备 实时 跟踪 记 录 下 来 的 路 线 。 


然而 ， 可 供 搜 索 的 自行 车 通勤 路 径 还 有 一 些 未 被 开发 的 潜能 ， 可 
以 通过 社区 的 众 包 来 解决 。 众 包 就 是 一 群 人 通过 贡献 自己 的 数据 和 资 
源 来 解决 问题 。 自 行车 通勤 者 更 愿意 与 其 他 考虑 用 自行 车 替代 汽车 通 
勤 的 人 分 享 自 己 的 窗 门 和 策略 ， 但 现在 还 没有 合适 的 方法 来 寻找 从 不 
同 社区 到 市 中 心 的 可 行 自 行车 通勤 路 径 ， 以 及 高 峰 时 段 这 些 路 径 的 交 
通 和 道路 情况 (第 三 章 中 提 到 过 UCLA 的 Biketastic 项 目 ， 采 集 的 就 是 
这 类 数据 ) 。 


另外 ， 对 于 新 的 目 行车 通勤 者 来 说 ， 预 估 在 悠 采 速度 下 的 骑 行 时 
间 〈 其 中 包括 等 信号 灯 的 时 间 ) ， 是 很 有 帮助 的 。 像 Runkeeper 和 
DailyMile 这 样 比 较 受 欢迎 的 服务 ， 一 般 都 带 有 专门 针对 通勤 者 的 搜索 
功能 。 应 用 开发 者 也 可 以 开发 能 够 目 动 采集 自行 车 通勤 者 通勤 数据 的 
应 用 程序 ， 并 将 数据 上 传 到 这 些 现 有 的 网 站 上 。 考虑 到 隐私 ， 
Runkeeper 和 DailyMile 都 把 个 人 活动 路 线 的 精确 起 点 和 终点 隐 去 ， 让 它 
们 的 用 户 在 发 布 通勤 路 径 时 感到 放心 。 尽 管 没有 办 法 匿名 发 布 路 线 ， 


通勤 者 并 不 需要 经 常 与 公众 分 译 他 们 的 通勤 数据 ， 一 条 通勤 路 径 分 至 
一 次 吏 可 以 给 其 他 人 提供 有 效 的 帮助 。 


挖 据 社区 中 人 们 的 行为 ， 并 把 它们 和 其 他 诸如 交通 、 空 气 污染 或 
其 他 环境 指标 数据 关联 起 来 的 工具 ， 对 于 关心 社区 的 积极 分 子 来 说 会 
很 有 用 。 加 利 福 尼 亚 大 学 和 英特尔 合作 的 “常识 "项目 〈 第 三 章 中 介绍 
过 ) 党 试 给 和 人们 配备 带 有 蓝牙 装置 的 空气 质量 感应 器 ， 感 应 器 上 的 数 
据 可 以 通过 蓝牙 传输 到 手机 上 。 为 了 改 墙 社区 ， 积 极 分 子 可 以 同 在 公 
共 空 间 活动 的 人 们 提供 空气 质量 感应 融 ， 比 如 那些 在 公园 游玩 或 在 等 
公交 车 的 人 。 如 果 这 些 感 应 右 检 测 到 空气 污染 物 水 平 较 高 ， 那 么 就 可 
以 发 起 针对 当地 工厂 的 请 愿 运动 ， 要 求 他 们 减少 污染 物 的 排放 。 


最 近 ， 旧 金山 一 个 著名 的 低 收入 社区 Bayview 开 展 了 一 个 创新 卫生 
保健 项 目 ，Bayview 社 区 由 于 临近 城市 工业 区 ， 长 期 受到 污染 的 困扰 ， 
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尿 病 和 气胸 等 儿童 及 成 人 疾病 的 因素 。 这 些 应 激 原 〈“ 即 引起 疾病 的 因 
A) 包括 较 差 的 空气 质量 和 噪声 污染 、 虐 待 、 健 康 食物 的 匮乏 、 锻 炼 
不 足 ， 以 及 来 目 家 庭 和 其 他 渠道 社会 文 持 的 缺失 等 。 


通过 当地 儿童 的 手机 所 记录 的 数据 ， 包 括 他 们 上 学 的 路 径 ， 等 符 
公共 交通 工具 的 时 长 ， 距 离 贩卖 新 鲜 食品 的 杂货 店 的 距离 等 ， 可 以 有 
效 识别 贫穷 社区 的 一 些 系 统 性 的 应 激 原 。 尽 管 儿 科 医 生 不 能 通过 来 目 
手机 的 数据 解决 所 有 问题 ， 但 他 们 可 以 给 病 鞋 的 父母 提 一 些 改变 状况 
的 建议 ， 比 如 换 条 路 去 上 学 以 减少 遇 到 的 汽车 ， 或 者 尽 可 能 地 选择 一 
条 路 过 新 鲜 食物 市 场 的 路 径 。 男 外 ， 移 动 数据 还 可 以 帮助 卫生 保健 提 
供 者 们 决定 要 为 哪些 社区 提供 新 的 娱乐 设施 和 课 后 资源 。 这 类 干预 措 
施 即 使 没有 来 目 手机 的 信息 也 显然 是 需要 的 ， 但 具体 的 数据 更 有 说 服 
力 ， 尤 其 是 当 卫 生 保 健 介 入 和 卫生 保健 费用 相关 联 的 时 候 ， 这 类 方法 
会 特别 有 优势 。 
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贴 ， 比 如 减免 他 们 购买 手机 的 费用 或 对 话费 进行 补贴 。 因 为 家 长 完全 
有 理由 不 信任 那些 监控 目 己 孩 子 所 处 位 置 的 技术 ， 这 个 项 目 在 整个 社 
区 中 的 接受 度 ， 有 赖 于 那些 有 影响 力 的 社区 成 员 对 这 一 技术 及 其 目标 
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小 规模 的 群体 中 产生 并 得 以 采集 ， 工 作 场 所 和 社区 中 的 政策 设计 也 很 
可 能 从 学 术 理 论 方法 转换 到 实证 方法 。 不 管 是 为 了 促进 小 规模 群体 数 
据 的 合理 使 用 ， 还 是 为 了 保护 个 人 的 隐私 ， 都 需要 协议 和 规则 ， 尽 管 
如 此 ， 每 个 机 构 或 社区 的 成 员 都 有 权 从 它们 产生 的 数据 中 获得 利益 。 
如 条 应 用 开发 考 认 真 考虑 如 何 或 励 用 户 参 与 和 保护 用 户 隐私 ， 在 小 规 
模 群 体 的 数据 采集 领域 将 有 很 多 不 同 的 机 会 。 


当 考 虑 到 工作 场所 的 工作 成 果 和 效率 ，Tacit 公 司 找到 了 一 个 最 有 
效 的 方法 来 保证 所 有 用 户 的 隐私 ， 即 在 用 户 和 信息 之 间 仅 扮演 中 介 的 
角色 ， 只 有 在 用 户 授权 的 情况 下 个 人 信息 才 会 被 分 享 。 在 通过 手机 报 
告 社 区 衰败 情况 的 案例 中 ， 人 们 似乎 愿意 向 城市 管理 部 门 分 享 上 自己 的 
匿名 位 置信 息 。 游 戏 或 其 他 的 激励 手段 是 否 能 让 用 户 愿 意 亮 出 目 己 的 
真实 喘 份 ， 还 有 竺 观察 ;然而 ， 越 来 越 多 的 人 开始 使 用 位 置 应 用 
Foursquare， 而 推 符 和 脸谱 网 提供 的 数据 也 表明 公众 对 于 分 至 上 自己 所 在 
位 置信 息 的 抵触 感 也 在 下 降 。 


当 分 享 通勤 、 徒 步 或 骑 行 路 径 的 应 用 程序 变 得 越 来 越 受 欢迎 ， 类 
似 Runkeeper 和 Dailymile 这 样 的 公司 ， 需 要 仔细 考虑 它们 的 保障 措施 ， 
以 保证 更 多 的 用 户 能 够 安全 分 享 数据 。 因 为 采集 的 数据 并 不 多 ， 而 参 
与 其 中 的 用 户 是 上 自愿 将 目 己 的 数据 分 享 到 公共 数据 库 中 的 ， 所 以 目前 
的 隐私 和 安全 措施 在 这 个 领域 中 比较 适用 。 
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的 应 激 原 这 两 个 案例 中 ， 隐 私 保 护 的 局 面 发 生 了 转变 ， 道 德 问 题 随 之 
产生 。 在 这 个 案例 中 ， 可 能 需要 依靠 法 律 机 制 来 说 服 参 与 者 ， 他 们 分 
诗 的 数据 不 会 被 用 来 针对 他 们 ， 也 不 会 提供 给 其 他 人 。UCLA 的 卡带 : 
希尔顿 和 德 博 拉 : 评 斯 洒 将 这 个 问题 明确 地 提 了 出 来 :“ 如 果 原 始 的 位 
置 数据 和 经 难 取 样 数据 在 民事 诉讼 中 可 以 很 容易 被 获取 ， 那 么 个 人 用 
户 旋 至 所 有 民众 可 能 都 不 会 接受 这 种 痢 的 调研 形式 。” 她 们 建议 通过 所 
谓 的 证 所 特权 ， 来 将 个 人 数据 等 同 于 非 商 业 交 易 机 密 来 对 符 。 通 过 这 
种 特权 ， 数 据 不 能 回 特 定 的 群体 或 机 构 公 开 ， 也 不 能 被 传唤 或 用 于 法 
律 程序 中 。 


直到 现在 ， 人 们 才 开 始 认 真 地 讨论 关于 个 人 数据 的 所 有 权 性 质 及 
其 保护 。 然 而 ， 即 使 没有 这 些 保护 措施 ， 很 多 人 仍然 愿意 与 设计 应 用 
程序 的 公司 分 译 大 量 的 个 人 数据 ， 比 如 位 置 退 踪 信 息 ， 甚 至 并 不 介意 
将 这 些 数据 公开 发 布 。 他 们 这 么 做 是 因为 ， 他 们 觉得 不 可 能 有 法 律 纠 
纷 ; 并 且 对 于 他 们 来 说， 更 好 的 信息 能 够 获得 更 大 的 回报 。 因 此 ， 关 
于 这 类 数据 采集 和 分 译 的 细微 差别 的 标准 和 法 律 ， 可 能 需要 很 多 年 才 
能 被 大 家 接受 。 同 时 ， 最 佳 的 实践 方法 是 在 所 有 应 用 中 ， 简 单 并 明确 
地 告知 人 们 ， 他 们 分 至 数据 的 风险 以 及 好 人 处。 


1 “城市 311” 是 纽约 政府 提供 的 一 项 便民 计划 ， 通 过 相关 的 电话 、 短 信和 网 络 渠道 ， 
人 们 可 以 获得 政府 信息 ， 以 及 一 系列 非 紧急 性 服务 。 一 一 编者 注 


: ”过 去 的 10 年 里 ， 很 多 犯罪 数据 都 被 电子 化 了 ， 这 就 为 数据 挖 气 : 
; 提供 了 可 能 性 ， 从 中 得 到 的 模式 可 以 帮助 警察 部 门 做 出 更 好 的 决 : 
: 策 ， 比 如 周 五 的 晚上 应 该 将 警车 派 到 哪些 地 段 ， 或 者 像 一 场 周 日 足 : 
: 球赛 这 种 重大 活动 应 该 配置 多 少 警力 。 : 
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第 五 章 
城市 数据 的 大 用 途 


到 2009 年 ， 全 球 70 亿 总 人 口中 已 有 一 半 以 上 居住 在 城市 。 在 美 
国 ， 总 人 口 的 82% 是 城市 居民 ， 而 印度 则 仅 有 30%。 不 管 在 哪个 国 
家 ， 城 市 都 具有 多 样 化 的 居民 和 行为 特征 ， 这 些 也 都 体现 在 城市 数据 
中 。 本 章 讨 论 的 对 象 是 人 口 在 1000 人 到 100 万 人 之 间 的 城市 ， 并 主要 
关注 两 种 体现 城市 特征 的 数据 : 交通 流量 和 犯罪 率 统计 。 


具体 而 言 ， 本 章 控 讨 的 是 采集 交通 数据 的 多 种 途径 ， 包 括 来 目 移 
动 电话 和 车 载 GPS 系统 、 道 路 探测 设备 的 用 户 数据 ， 以 及 来 目 传统 的 
交警 及 其 他 交通 服务 机 构 的 报告 等 ， 并 对 其 中 的 隐私 性 和 商业 性 的 考 
虚 进 行 了 讨论 。 我 们 也 注意 到 正在 激增 的 公共 犯罪 数据 库 ， 千 察 、 政 
府 官 员 、 居 民 或 是 房地产 商都 可 以 通过 这 些 数 据 库 查看 城市 中 发 生 问 
题 的 时 间 和 地 方 。 本 章 还 特别 讨论 了 通过 摄像 头 采 集 数 据 在 法 律 和 技 


术 上 可 能 面临 的 挑战 ， 这 些 问 题 在 交通 和 犯罪 监控 领域 部 变 得 日 益 普 
沪 。 


尽管 本 章 涉 及 的 数据 采集 技术 大 多 古人 简单 明确 的 ， 但 数据 的 内 尊 
广泛 。 第 六 章 考 察 了 如 何 利 用 城市 交通 流量 的 数据 来 分 配 道 路 资源 ， 
并 为 要 驶 者 提供 实时 交通 状况 信息 和 路 线 选 择 建 议 。 当 犯 徘 数 据 与 其 
他 一 些 信息 如 天 气 、 地 理 地 形 、 重 要 事件 、 一 年 中 的 茶 些 时 间 相 匹配 
时 警方 可 以 利用 这 些 信息 ， 更 有 预见 地 进行 犯罪 监控 。 


城市 空间 层面 的 隐私 问题 与 前 两 个 空间 层面 有 所 不 同 。 在 城市 
中 ， 人 们 有 足够 的 理由 希望 保护 目 己 的 隐私 信息 。 然 而 ， 如 有 宁 发 生 了 
犯罪 行为 且 嫌 疑犯 已 经 确定 ， 那 么 这 个 人 的 匿名 权 束 失效 了 。 他 的 姓 
名 、 年 龄 、 保 释 金 等 信息 都 会 进入 公共 档案 ， 并 出 现在 某 份 当地 报纸 
上 上。 而且， 警方 还 可 能 会 同一 些 人 研究 人 员 提 供 这 些 信息 ， 以 进行 减少 
本 地 区 犯 徘 的 研究 。 本 章 也 将 涉及 一 些 这 样 的 案例 。 


交通 数据 


曾几何时 ， 大 多 数 的 交通 信息 都 是 来 目 道路 上 方 的 直升机 观测 报 
告 。 如 今 ， 归 功 于 GPS 导航 设备 、 交 通 摄像 头 ， 以 及 从 要 驶 员 的 手机 
和 专 为 采集 交通 数据 而 设计 的 车 载 传 感 硕 中 获得 的 位 置信 息 ， 普 通 的 
Se (以 及 交通 报告 员 ) 可 以 获得 比 以 往 要 详细 得 多 的 交通 信息 。 
而 根据 美国 2011 年 的 《城市 交通 状况 报告 》 《Urban Mobility 
Report) ， 交 通 拥堵 每 年 给 美国 造成 的 经 济 损失 已 经 超过 了 1 000 亿 美 
元 ， 并 且 每 年 浪费 每 个 通勤 者 长 达 34 小 时 ， 因 此 有 必要 寻找 一 条 更 好 
的 路 线 。 


位 于 华盛顿 州 柯 克 兰 的 Inrix 公 司 致力 于 通过 更 多 
要 驶 者 的 导航 设备 提供 每 分 钟 实时 更 新 的 路 况 。 该 公 
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通 数据 ， 为 
世界 上 最 大 


的 交通 数据 供应 商 ， 这 一 市 场 的 竞争 者 还 有 NACTEQ、TomTom 
International BV fil Media Mobile 几 家 公司 。Intrix 的 交通 数据 服务 的 客 
户 包括 AT&T、 至 马 、 和 福特、 佳明、 谷歌、MapQuest 和 Sprint 等 。 


2004 年 ，Intrix 从 微软 公司 独立 出 来 ， 到 2010 年 已 经 在 美国 实现 了 
对 260 000 英 里 ( 约 418 429 和 干 米 ) 长 道路 的 实时 监测 覆盖 。Intrix 用 多 
样 化 的 数据 进行 交通 时 间 预 测 和 路 线 建议 ， 包 括 警 方 和 紧急 情况 扫描 
摄像 头 提 供 的 交通 警示 信息 、 各 州 交通 部 门 (DOts) 汇集 的 历史 数 
据 、 道 路 传感器 和 摄像 头 的 实时 数据 、 越 来 越 多 鸭 驶 者 的 手机 和 GPS 
设备 的 汇聚 信息 、 重 要 活动 和 事件 的 信息 ， 如 演唱 会 或 体育 比赛 ， 还 
有 从 车 载 设 备 采 集 数 据 中 推断 出 的 道路 状况 和 天 气 。 


传统 的 交通 数据 采集 方法 ， 基 本 上 就 是 从 地 面 或 空中 进行 人 工 观 
测 ， 且 仍 在 使 用 ， 如 无 线 电 交 通报 告 等 方式 。 来 自 交 警报 告 、 紧 急 情 
况 扫 摘 摄 像 涉 ， 以 及 桥梁 、 隧 道 与 高 速 公路 省 理 组 织 和 道路 摄像 头 的 
数据 被 类 似 Clear Channel 这 样 的 公司 汇总 ， 并 出 售 给 广播 、 电 视 台 以 
及 Inrix 公 司 等 。 人 研究 人 员 也 可 以 通过 购买 或 授权 获得 数据 ， 但 这 些 数 
据 一 般 需 要 用 户 特别 通过 设备 制造 商 (如 佳明 和 TomTom 等 ) 进行 订 
阅 而 获得 授权 。 


通过 公共 交通 摄像 头 可 以 迅速 且 简 单 地 判断 一 条 道路 是 否 拥堵 ， 
现在 已 有 很 多 摄像 头 的 实时 画面 可 以 通过 互联 网 直接 获取 。 这 些 摄像 
头 通常 被 用 于 对 交通 状况 进行 定性 评估 ， 并 快速 发 现 交通 事故 发 生地 
上 护 。 然 而 ， 也 有 些 公司 ， 如 比利时 的 Traficon 和 以 色 列 的 Agent Vi 等 ， 
正在 生产 可 以 目 动 分 析 视 频数 据 的 监测 系统 。 


另 一 种 监测 交通 状况 的 方式 是 通过 道路 植 入 式 感 应 设备 。 这 些 被 
称 为 植 入 环 路 感应 器 的 设备 已 经 使 用 了 数 十 年 ， 并 且 还 在 提供 有 价值 
的 数据 。 这 种 环 路 感应 怖 可 以 产生 一 个 电磁 场 ， 当 汽车 的 金属 展 盘 经 
过 这 个 场 时 会 对 其 产生 干扰 。 到 2009 年 ， 加 利 福 尼 亚 州 的 高 速 公路 系 
统 下 已 经 安 狠 了 25 000 个 这 样 的 感应 硕 ， 用 于 监测 道路 流量 、 拥 墙 情 
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并 回 公 众 开放 ， 有 时 也 可 以 从 交通 部 门 的 官方 网 站 上 获得 。Inrix 公 司 
也 将 这 些 历史 数据 纳入 了 他 们 的 交通 预测 算法 中 ， 基 于 这 些 历史 交通 
数据 ， 可 以 帮助 人 们 设计 交通 线路 ， 比 如 ， 提 供 一 条 在 周 四 下 午 4 点 半 
穿越 圣路易斯 城区 的 路 线 。 


还 有 一 类 感知 技术 是 Inrix 公 司 没 有 采用 的 ， 但 可 以 用 于 进行 与 
Inrix 相 似 的 交通 流量 估 判 ， 那 束 是 固定 式 蓝 牙 探测 占 。 马 里 兰 大 学 
2012 年 的 一 个 项 目 表明 ， 两 个 相距 2 英里 ( 约 合 3.22 千 米 ， 固 定 放置 的 
监 牙 探测 右 可 以 精确 获得 交通 流速 度数 据 。 目 前 ， 大 约 每 20 辆 汽车 中 
忠 有 一 辆 安装 了 市 有 一 个 唯一 识别 码 的 车 载 蓝牙 感应 絮 ， 一 般 是 用 于 
连接 手机 以 便 在 开车 时 不 用 手持 手机 便 可 通话 。 两 个 固定 式 监 牙 探测 
器 中 的 一 个 捕捉 到 车 载 蓝牙 设备 的 识别 码 ， 当 车 辆 行驶 到 另 一 个 探测 
右上 时 ， 如 果 第 二 个 探测 占 也 捕捉 到 同一 个 识别 码 时 ， 车 辆 的 运行 速度 
就 可 以 被 计算 出 来 了 。 


尽管 环 路 感应 、 蓝 牙 探 测 和 道路 摄像 头 是 mnrix 公 司 所 需 实 时 数据 
的 来 源 ， 但 这 些 技 术 并 不 能 窗 盖 所 有 道路 。 这 些 基础 设施 感应 器 集中 
安装 于 主要 的 高 速 公路 和 域 区 。 所 以 ，Inrix 公 司 开 始 寻求 更 加 分 散 的 
交通 数据 来 源 点 ， 车 辆 上 的 GPS 导航 设备 和 智能 手机 。 虽 然 GPS 导 航 
设备 相对 较为 精确 ， 而 手机 的 定位 数据 依赖 于 Wi-Fi 和 手机 通信 基站 发 
射 塔 的 三 角 测 量 ， 有 时 会 有 超过 20 英 尺 〈 约 6 米 ) 的 误差 。 不 过 ， 通 过 
一 定数 量 的 手机 数据 ， 还 是 可 以 从 误差 中 提取 出 有 用 信息 。 到 2012 
年 ，Inrix 公 司 已 经 获得 了 全 球 大 约 5 000 万 部 手机 和 GPS 设 备 的 数据 ， 
大 部 分 来 自 车 队 和 商务 车 辆 。 该 公司 称 ， 美 国 的 众 包 数据 主要 来 自 车 
载 GPS 设 备 。2011 年 夏天 ，Inrix 公 司 收 购 了 一 家 利用 手机 通信 基站 三 
角 测 量 技术 对 芋 辆 进行 定位 的 英国 公司 IT IS。 尽 管 这 项 技术 的 精确 度 
不 如 GPS， 且 在 美国 以 外 的 地 区 只 能 从 车 流 中 获取 大 约 50% 的 定位 数 
据 ， 但 对 于 GPS 设备 不 普遍 的 地 区 来 说 是 一 个 很 有 用 的 补充 。 


Inrix 公 司 也 考虑 到 了 城市 及 周边 地 区 的 重要 活动 ， 以 及 历史 上 类 
似 活 动 的 举行 对 交通 状况 的 影响 。 举 办 活动 的 公司 员工 手动 汇集 活动 
的 相关 数据 ， 之 后 这 些 信息 被 纳入 交通 预测 和 路 线 建议 的 算法 中 。 


此 外 ，Inrix 公 司 还 与 一 系列 的 汽车 制造 商 合作 ， 包 括 奥 迪 、 尼 和 桑 
和 福特 等 ， 为 它们 的 车 载 导航 系统 提供 交通 数据 信息 。2012 年 ，Inrix 
公司 开始 从 这 些 合作 伙伴 生产 的 车 内 传 感 占 中 控 拥 信息。 在 众多 传 感 
妖 中 ， 防 抱 死 刹车 系统 和 挡 风 玻璃 十 刮 器 的 使 用 情况 也 成 为 判断 道路 
实时 状况 的 重要 信息 。 


与 Inrix 公 司 一 样 ， 合 歌 也 使 用 手机 帮助 判断 道路 交通 状况 。 除 了 
使 用 车 队 数据 外 ， 谷 歌 还 可 以 从 那些 允许 谷歌 地 图 读 取 GPS 信 息 的 用 
户 手机 上 ， 以 匿名 方式 获取 定位 和 速度 数据 。 据 谷歌 公司 的 说 法 ， 用 
户 的 手机 会 匿名 向 谷歌 发 送 手机 移动 速度 的 数据 。 结 合同 一 时 间 道 路 
上 其 他 用 户 的 手机 发 送 来 的 速度 数据 (如 今 超 过 2 亿 部 移动 设备 安装 了 
谷歌 地 图 ) ， 这 种 方法 提供 了 非常 不 错 的 实时 信息 。 但 是 谷歌 缺乏 有 
些 国 家 的 数据 ， 所 以 从 2011 年 秋 开 始 ， 它 们 与 Inrix 公 司 合作 来 填补 这 
方面 的 空缺 。 


合 歌 考虑 到 了 用 户 的 隐私 问题 ， 它 们 采集 的 速度 和 位 置信 息 古 匿 
名 的 ， 并 且 需 要 用 户 同 意 才能 上 传 数据 至 谷歌 的 服务 器 。 此 外 ， 当 多 
人 从 同一 区 域 发 送 数 据 报告 时 ， 谷 歌会 将 这 些 数 据 混合 起 来 ， 从 而 很 
难 去 区 分 不 同 手机 的 上 传 内 容 。 最 重要 的 是 ， 每 一 段 行程 的 起 点 和 终 
点 数据 会 被 永久 性 抹 掉 ， 即 使 征 谷 歌 员 工 也 无 法 获知 相关 信息 。 而 在 
手机 上 人 允许 谷歌 地 图 目 动 上 传 数 据 至 服务 器 的 用 户 ， 也 可 以 选择 通过 
苯 止 定位 服务 来 停止 上 传 数据 。 尽 管 谷歌 为 其 一 些 地 图 数据 提供 了 应 
用 程序 编程 接口 ， 包 括 方向 、 距 离 和 海拔 ， 但 是 目前 交通 数据 对 于 那 
些 想 要 开发 它们 目 己 应 用 的 程序 员 来 说 依然 是 不 可 得 的 。 


2013 年 中 期 ， 谷 歌 收购 了 硅谷 的 创业 公司 Waze， 该 公司 的 业务 主 
要 是 在 手机 用 户 允 许 的 前 提 下 采集 交通 数据 。 实 际 上 ，2009 年 成 立 的 


Waze 公 司 主要 依靠 用 户 自 行 充实 地 图 内 容 (比如 ， 补 充 空白 小 路 的 路 
名 ) ， 还 通过 用 户 上 报 车 辆 测速 区 、 交 通 拥堵 和 事故 。2012 年 ，Waze 
公司 估计 其 用 户 数量 比 先 前 翻 了 一 番 ， 从 1 000 万 涨 到 了 2 000 万 。 随 着 
更 多 城市 的 更 多 用 户 参 与 进来 ，Waze 公 司 可 以 提供 更 准确 的 行程 时 间 
和 更 好 的 路 线 选择 ， 它 们 的 服务 因此 也 变 得 更 加 有 价值 。 为 了 吸引 更 
多 用 户 的 参与 ， 这 家 公司 还 引入 了 “社交 游戏 ”元素 ， 向 使 用 软件 的 用 
户 发 放 虚 拟 奖 励 、 积 点 和 徽章 。 


谷歌 、Waze 和 其 他 一 些 公司 开发 的 这 类 手机 交通 应 用 ， 能 够 吸引 
用 户 的 原因 主要 是 便宜 且 提 供 比 较 可 靠 的 交通 预测 数据 ， 并 且 还 有 一 
定 的 使 用 乐趣 。 虽 然 Inrix 和 TomTom 公 司 也 提供 手机 应 用 ， 但 它们 的 
核心 业务 是 为 车 载 导 航 系统 提供 精确 的 交通 分 析 数 据 。 目 前 ，Inrix 和 
大 众 来 源 数 据 软件 的 交通 数据 还 无 法 免费 下 载 ， 尽 管 有 些 可 以 通过 购 
买 使 用 许可 的 方式 获得 。2008 年 以 来 ， 马 里 兰 大 学 与 Inrix 公 司 和 I-95 
廊 道 联合 组 织 党) 建立 了 合作 关系 ， 研 究 人 员 通 过 利用 Inrix 公 司 在 L_95 
交通 廊 道 (贯穿 美国 整个 东海 岸 线 ， 北 起 缅 因 州 南 至 佛罗里达 州 ) 沿 
线 10 个 州 ， 超 过 20 000 英 里 ( 约 32 000 千 米 ) 道路 上 ， 采 集 汇 总 的 实时 
和 历史 交通 数据 ， 来 帮助 美国 交通 部 研究 更 好 地 分 配 交 通 资 源 及 分 配 
地 点 的 方法 。 


用 数据 预测 犯罪 


预测 犯罪 行为 的 关键 是 犯罪 历史 记录 的 基础 数据 库 。 如 今 最 可 靠 
的 数据 采集 手段 与 过 去 相 比 并 没有 什么 不 同 : 警察 仍然 需要 写 事 故 和 
逮捕 报告 ， 其 中 包括 了 很 多 有 用 的 信息 。 这 些 案件 报告 主要 有 两 种 来 
源 : 一 是 警察 在 巡逻 时 发 现 犯 徘 行为 ， 对 嫌疑 人 进行 盘问 并 决定 是 否 
逮捕 ;二 征 有 人 报警 提供 消 轧 。 和 警察 会 在 报告 中 记录 时 间 、 日 期 、 犯 
罪行 为 发 生地 点 和 类 型 《有 数 百 种 类 型 ) ， 还 有 更 具体 的 信息 ， 如 局 


边 环境 (比如 是 在 便利 店 里 、 小 路 上 或 是 街道 上 ) ， 如 果 是 有 人 报 
警 ， 还 会 记录 报警 人 的 姓名 和 联系 信息 。 


数 十 年 来 ， 事 件 和 逮捕 报告 数据 都 被 输入 电脑 进行 处 理 并 标注 于 
地 图 上 ， 形 成 更 有 用 的 视觉 空间 格式 信息 。 这 些 地 图 一 般 被 用 于 一 些 
特殊 案件 ， 例 如 用 于 界定 犯罪 嫌疑 人 活动 的 地 理 范 围 ， 还 可 以 从 中 分 
析 特 定 社 区 可 能 的 多 发 犯罪 类 型 ， 以 及 随 着 时 间 变 化 ， 犯 罪行 为 同 新 
社区 的 空间 迁移 和 扩散 情况 。 


近年 来 ， 专 业 算 法 和 实时 犯罪 数据 的 使 用 可 以 对 这 些 犯 罪 地 图 进 
行 持续 升级 ， 从 而 可 以 在 犯罪 发 生 之 前 先 将 警力 部 署 至 事 发 地 〈 详 见 
第 六 章 ) 。 在 田纳西 州 的 孟菲斯 市 ， 警 方 从 2005 年 就 开始 使 用 一 款 叫 
作 Blue CRUSH 的 软件 。 通 过 历史 犯罪 数据 的 热点 地 图 ， 警 官 们 可 以 检 
查 当 前 的 犯罪 活跃 度 ， 以 及 因为 之 前 的 警力 部 署 而 导致 的 相应 区 域 的 
犯罪 水 平 变化 情况 。 每 周 更 新 的 热点 地 图 会 被 用 于 制订 下 一 周 的 人 员 
部 署 策略 。 


除了 能 生成 显示 犯罪 行为 的 空间 关系 图 ， 犯 罪 数 据 还 可 以 与 多 层 
地 理 信息 图 相 鲁 加， 如 美国 地 质 勘探 局 提供 的 地 形 数 据 。 男 外 ， 也 可 
以 将 徘 犯 和 受害 人 的 住址 标注 在 地 图 上 并 县 加 地 理 信 息 ， 如 道路 、 学 
校 、 选 区 、 铁 路 、 工 厂 、 就 业 岗 位 、 平 均 收 入 等 可 以 从 美国 统计 局 免 
费 获 取 的 各 种 数据 。 同 样 ， 不 同 犯罪 数据 之 间 还 可 以 进行 比较 ， 以 获 
得 更 深入 的 了 解 一 一 比如 查获 毒品 和 汽车 盗 贸 发 生 时 间 的 比较 。 


除了 绘制 犯罪 信息 地 图 ， 一 些 研 究 人 员 和 和 警力 部 门 也 在 编辑 可 疑 
帮派 活动 网 络 图 。 为 了 弄 清 楚 帮 派 之 则 的 活动 关系， 洛杉矶 警察 潮 和 
加 州 大 学 洛杉矶 分 校 分 析 了 超过 1 000 起 帮派 犯罪 的 历史 数据 ， 以 及 10 
年 间 对 于 一 个 拥有 大 约 30 个 帮派 地 区 的 犯 徘 嫌疑 活动 数据 的 记录 。 研 
窜 人 员 可 以 通过 模型 来 判断 最 有 可 能 进行 狐 犯 罪 活 动 的 前 三 个 帮派 ， 
准确 度 达 80% 。 


圣 克 和 鲁 歼 大 学 的 研究 人 员 采 用 了 加 州 大 学 洛杉矶 分 校 的 另 一 个 模 
型 ， 通 过 圣 殉 鲁 效 警察 部 门 的 数据 来 监控 犯 徘 行为 的 爆发 。 他 们 的 研 
完 发 现 ， 犯 徘 行为 的 发 生 与 地 震 后 余震 的 发 生 具 有 类 似 的 数据 模式 ， 
该 发 现 指 导 和 警方 在 最 有 可 能 发 生 犯 徘 的 区 域 部 车 人 员 。 


用 视频 监控 犯罪 


在 街道 上 安装 视频 监控 摄像 头 是 一 种 数据 密集 型 的 犯罪 信息 采集 
手段 。 美 国 国土 安全 部 为 了 对 抗 鸭 怖 主义 的 威胁 ， 为 警察 部 门 安 装 摄 
像 头 提供 了 大 量 资 助 ， 这 使 得 美国 运用 于 公共 安全 方面 的 摄像 头 数 量 
出 现 了 井喷 。2009 年 ， 国 土 安全 部 为 其 城市 安全 项 目 (Urban Area 
Security Initiative) 在 7 个 城市 花费 了 1 500 万 美元 ， 该 项 目的 目的 是 为 
了 在 城市 地 区 ， 针 对 奴 怖 主义 行为 的 防范 、 应 对 和 重建 问题 ， 进 行规 
划 部 署 和 培训 。2010 年 ， 该 项 目 在 64 个 大 都 市 区 花费 了 8.3 亿 美元 。 
2011 年 ，31 个 城市 投入 共 使 用 了 6.62 亿 美元 的 项 目 资金 。 


天 于 这 些 摄像 头 是 否 能 够 对 犯 徘 行为 起 到 震慑 作用 ， 则 有 许多 不 
同 的 观点 。 南 加 州 大 学 2008 年 进行 的 一 项 研究 ， 通 过 对 洛杉矶 犯 徘 祝 
频 的 分 析 发 现 ， 从 统计 上 来 看 ， 摄 像 头 并 不 能 显著 地 降低 又 力 和 财产 
犯 徘 的 发 生 。 同 样 的 ， 加 州 大 学 伯克利 分 校 在 2008 年 的 一 项 研究 中 也 
认为 ， 旧 金山 在 安 狠 摄像 头 之 后 ， 又 力 犯 菲 的 发 生 并 未 减少 。 伦 敦 以 
其 众多 公共 摄像 头 而 闻名 ，2009 年 来 目 伦敦 警方 的 一 份 内 部 报告 则 
称 ， 摄 像 尖 对 于 帮助 抓 捕 罪 犯 并 没有 什么 帮助 。 


但 城市 研究 所 2011 年 发 布 的 一 份 研究 报告 ， 通 过 分 析 芝 加 哥 、 书 
尔 的 摩 和 华盛顿 特区 2001 年 以 来 的 历史 数据 ， 揭 示 了 更 加 复杂 的 绩 
论 。 芝 加 哥 的 监控 摄像 头 网 络 在 这 三 个 城市 中 覆盖 最 广 。 洪 堡 公园 地 
区 安装 了 摄像 头 后 ， 总 体 犯 罪 率 下 降 了 12%; 然而 之 加 哥 的 另 一 个 地 
区 ， 西 加 菲尔德 公园 地 区 的 犯罪 率 没有 变化 。 巴 尔 的 摩 市 的 三 个 被 研 
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一 个 地 区 没有 下 降 。 在 华 壁 顿 特区 则 没有 出 现 犯 罪 率 下 降 。 该 研究 报 
告 的 作者 认为 ， 对 摄像 头 技术 的 最 佳 使 用 方式 是 ， 让 训练 有 素 的 人 员 
监控 实时 屏幕 ， 能 够 移动 摄像 头 以 获得 最 大 视野 。 这 一 建议 点 明了 摄 
像 机 装置 以 及 维护 此 类 数据 采集 的 重要 性 。 


如 何 获 得 公众 数据 


尽管 对 普通 市 民 而 言 ， 他 们 并 没有 获取 公共 摄像 头 大 部 分 内 容 的 
权限 ， 但 市 民 可 以 通过 诸如 crimereports.com 或 是 crimemapping.com 这 
样 的 网 站 连接 到 交通 摄像 头 、 网 络 摄像 头 以 及 匿名 的 犯罪 行为 数据 
库 ， 这 些 网 站 依靠 执法 部 门 提供 犯罪 数据 。 用 户 都 可 以 通过 这 两 个 网 
站 看 到 不 同 犯 罪行 为 在 地 图 上 的 可 视 化 分 布 图 。 为 了 保护 犯罪 受害 人 
的 隐私 ， 具 体 地 址 被 隐藏 ， 所 以 案件 发 生地 的 数据 是 街区 层面 的 。 数 
据 不 能 被 下 载 ， 且 通过 技术 手段 抓 取 数 据 也 是 违犯 用 户 使 用 条 球 的 。 
然而 ， 在 crimereports.com 的 网 站 上 ， 人 性 侵犯 案件 的 详细 信息 如 姓名 、 
年 龄 和 地 址 都 是 可 以 查看 的 。 


监控 的 合法 性 讨论 


当 区 通 摄像 头 被 安 效 在 距 司 机 有 一 定 距离 的 位 置 时 ， 看 起 来 似乎 
古 无 害 的 ， 但 2004 年 美国 民权 同盟 束 此 抗议 ， 称 警方 可 以 使 用 这 些 实 
施 监 控 的 交通 视频 数据 非法 拦截 车 辆 。 该 组 织 认为 这 违犯 了 蔡 止 非法 
追踪 和 抓 捕 的 禁令 。 


近年 来 ， 开 始 出 现 一 种 新 类 型 的 道路 摄像 头 。 除 了 监控 交通 流量 
外 ， 它 们 还 能 抓拍 雪 驶 员 面部 和 汽车 牌照 ， 从 而 据 此 对 赣 红 灯 和 超速 


行为 开 出 罚单 。 但 2007 年 明尼苏达 最 高 法 院 认 为 在 红 灯 时 对 驾车 者 进 
行 拍 照 ， 侵 犯 了 司机 的 无 罪 推定 权 时。 其 他 一 些 州 ， 包 括 威 斯 康 
星 、 西 弗吉尼亚 、 南 加 利 佛 尼 亚 、 新 罕 布 什 尔 、 蒙 大 拿 和 密西西比 等 
州都 禁止 使 用 这 种 摄像 头 。 而 部 分 大 一 些 的 城市 如 芝加哥 、 巴 尔 的 
摩 、 圣 地 亚 哥 、 波 特 兰 和 华盛顿 特区 等 ， 还 在 继续 使 用 红 灯 摄 像 头 ， 
这 些 设备 通常 都 是 由 私营 企业 安装 和 维护 。 民 意 调 查 显 示 ， 这 些 城 市 
有 超过 半数 的 民众 赞同 使 用 这 类 摄像 头 。 


用 于 交通 和 犯罪 监控 的 公共 摄像 ， 或 统称 为 静默 视频 监控 ， 在 法 
庭 总 体 上 还 是 得 到 文 持 的 。1967 年 美国 最 高 法 院 在 联邦 宪法 第 四 修正 
案 的 基础 上 ， 通 过 “ 卡 次 诉 美 国政 府 ” 案 (美国 最 高 法 院 判 例 汇编 索引 
号 : 389 U.S. 347) 对 现代 意义 的 搜查 与 扣押 进行 了 7 定义。 基本 上 , 在 
公共 道路 上 行走 或 站 在 公园 中 的 人 ， 其 活动 是 不 被 认为 具有 隐私 权 
的 。 同 样 ， 在 公共 道路 上 鸭 车 行驶 的 人 也 不 能 要 求 隐 私 ， 他 是 可 以 被 
监视 的 。 因 而 ， 在 道路 上 对 个 人 进行 公共 监控 就 是 可 行 的 。 


而 在 1993 年 的 “美国 政府 诉 谢 尔 曼 ” 案 (索引 号 : 990 F.2d 1265) 
中 ， 这 类 监控 的 合法 性 得 到 进一步 强化 。 第 九 巡 回 上 诉 法 庭 认 为 ， 在 
公共 空间 被 摄像 的 人 “不 应 期 待 获 得 隐私 权 ， 也 不 能 以 违犯 第 四 修正 案 
为 由 起 诉 政府 进行 影像 记录 的 行为 ”。 


在 公共 场所 使 用 摄像 头 的 合法 性 表明 ， 研 究 人 员 也 可 以 在 公共 至 
间 目 行 安 效 摄 像 头 进行 相关 人 研究。 实际 上 ， 之 前 已 经 有 在 大 学 校园 安 
洲 摄 像 头 进行 人 员 流 动 性 研究 的 先例 。 然 而 目 行 安 狠 摄像 尖 的 花费 顾 
大 ， 很 多 在 项 目 中 使 用 摄像 头 的 研究 人 员 ， 都 是 使 用 提供 在 线 影像 的 
政府 资助 和 运作 的 摄像 头 。 目前， 利用 网 络 摄像 头 的 研究 ， 大 多 数 是 
依靠 远程 设置 的 摄像 头 追踪 野生 动物 或 进行 环境 观测 。 


虽然 对 于 个 体 研究 人 员 或 企业 主 来 说 ， 想 要 获取 整个 城市 的 交通 
和 犯罪 数据 还 是 相对 困难 的 ， 但 是 他 们 可 以 选择 与 那些 采集 和 汇总 数 


据 的 大 公司 合作 ， 或 者 与 警方 合作 以 获得 进入 历史 数据 库 的 权利 ， 
利用 可 以 公开 下 载 的 政府 数据 。 当 犯罪 数据 个 小 心意 慎 地 使 用 时 ， 
仅 可 以 避免 侵犯 个 人 隐私 ， 还 能 被 用 来 保护 城市 安全 。 


此 外 ， 研 究 人 员 还 可 以 在 特定 地 点 安装 ( 非 音频 的 ) BRK, A 
行 采 集 城 市 流动 性 数据 ， 尽 管 数 据 样本 规模 较 小 。 但 即使 定 这 些 关 于 
某 一 部 分 城市 生活 的 小 样本 ， 经 过 时 间 的 积累 ， 仍 然 可 以 提供 对 城市 
的 深入 认识 。 和 警力 和 交通 资源 可 以 据 此 在 城市 中 得 到 更 好 的 配置 ， 一 
些 人 研究 人 员 甚 至 还 开始 利用 这 类 数据 监控 疾病 的 爆发 。 目 前 ， 对 犯 徘 
和 交通 数据 的 利用 还 很 不 足 ， 它 们 其 实 可 以 让 城市 变 得 更 加 安全 和 宜 
大 。 在 下 一 章 中 ， 我 们 将 探索 在 这 些 数据 中 发 现 的 一 些 可 能 性 。 


A St 


1. I-95 是 美国 95 号 州 际 公路 的 缩写 ， 全 长 约 3 098 干 米 。 共 计 跨 越 15 州 ， 是 美国 东 岸 

的 交通 动脉 。 一 一 译 者 注 
2. 无 罪 推 定 权 ， 指 任何 人 在 未 经 依法 判决 有 罪 之 前 ， 应 视 其 无 罪 ， 被 告 人 不 负 有 证 明 
自己 无 罪 的 义务 ， 被 告 人 有 提供 证 明和 有 利于 自己 的 证 据 的 权力 。 一 一 编者 注 


第 六 章 
将 适合 的 资源 放 在 适合 的 位 置 


随 着 技术 的 发 展 ， 人 们 对 数据 的 分 析 能 力也 从 个 人 层面 扩展 到 整 
个 城市 范围 。 有 些 人 对 待 数据 集 的 态度 ， 就 如 算命 至 师 面 对 水 唱 球 一 
样 : 似乎 提出 准确 的 问题 ， 示 来 束 会 展现 在 眼前 。 然 而 ， 即 便 拥有 了 
大 数据 和 有 效 的 分 析 手 段 ， 未 来 的 画面 也 不 会 那么 清晰 。 不 过 ， 城 市 
规模 的 分 析 给 我 们 提供 了 一 个 令 人 激动 的 机 遇 ， 为 犯罪 和 交通 问题 建 
立 快速 适应 系统 ， 这 样 你 的 预测 吏 可 以 在 这 些 领域 发 挥 一 定 的 作用 。 


通过 分 析 犯 罪 数据 中 的 趋势 ， 费 城 、 亚 非 斯 和 洛杉矶 的 警察 部 门 
在 此 基础 上 建立 了 一 个 能 够 在 案 发 前 对 警力 资源 进行 最 优 分 配 的 系 
统 。 这 些 系统 分 析 的 结 采 表明 ， 在 特定 区 域 只 要 有 警察 出 现 束 有 可 能 
阻止 严重 犯罪 的 发 生 。 当 在 高 犯罪 地 区 以 一 种 不 威胁 那些 遵 纪 守 法 的 
市 民 们 的 、 瘟 和 的 方式 布置 一 定 警 力 ， 这 些 犯 罪 预 测 系 统 整 可 以 让 社 
区 变 得 更 加 健康 而 且 安 全 。 


交通 预测 是 另 一 个 有 发 展 前 景 的 领域 。 像 Inrix 和 谷歌 这 样 的 公司 
将 众多 的 数据 来 源 整 合 起 来 ， 以 更 好 地 预测 出 行 时 间 ， 同 时 也 不 断 更 
新 实时 数据 ， 帮 助人 们 避免 拥堵 或 事故 。 微 软 公 司 的 研究 人 员 甚至 可 
以 通过 交通 数据 ， 预 测 未 来 的 意外 交通 事件 。 正 是 因为 有 了 现实 控 
据 ， 我 们 才 可 以 预测 意 想 不 到 的 事件 。 


但 是 交通 数据 并 不 仅仅 只 能 用 来 预测 交通 状况 。 城 市 规划 师 们 也 
可 以 用 这 些 数据 来 分 析 哪 些 道路 和 交叉 口 存在 危险 需要 升级 ， 如 何在 
紧急 状况 下 最 快 芷 散人 群 等 问题 。 此 外 ， 区 通 数据 也 可 以 用 来 生成 城 
市 及 周边 整体 机 动 性 的 乌 欧 视图， 让 我 们 看 到 城市 居民 的 暂时 性 流 
动 。 
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些 重 要 的 问题 : 某 个 病毒 是 在 何 处 起 源 的 ? 哪些 人 需要 被 隔离 ? 哪些 
人 需要 被 注射 疫 盏 ? 一 些 人 研究 人 员 使 用 交通 数据 和 其 他 一 些 机 动 性 指 
标 ， 来 更 好 地 理解 传染 病 在 城市 间 的 传播 (第 十 章 中 会 更 加 详细 地 讨 
论 在 全 球 范围 内 对 疾病 发 展 的 追踪 ) 。 


本 章 主要 讨论 在 城市 范围 进行 的 几 项 更 细致 入 微 、 简 单 预测 性 的 
现实 挖掘 应 用 。 


交通 预测 和 意外 事件 控制 


Inrix 公 司 编写 了 一 套 基 于 多 种 来 源 数据 的 算法 一 一 包括 手机 GPS 
和 无 线 定位 数据 、 车 载 GPS 的 位 置信 息 、 道 路 感应 器 和 摄像 头 捕捉 到 
的 信息 、 历 史 交 通 数 据 、 重 要 活动 安排 和 天 气 预报 信息 ， 综 合 利 用 这 
些 数据 来 判断 每 一 段 道路 的 交通 流速 度 。 然 后， 该 公司 依据 这 些 信息 
来 计算 和 估算 整个 行程 的 区 驶 时 间 。 此 外 ， 这 个 算法 还 通过 持续 监测 
交通 流 ， 不 断 更 新 估算 预测 结果 。 根 据 马 里 兰 大 学 和 I-95 廊 道 联合 组 
织 共同 领导 的 一 项 独立 研究 一 一 他 们 在 I-95 交 通 亡 道 上 的 一 段 2 英 里 的 
道路 上 设置 了 固定 式 蓝 牙 感 应 器 ， 以 进行 交通 流 监 测 〈 详 见 第 五 
草 ) ， 监 测 发 现 Inrix 公 司 的 速度 预测 精确 度 可 达 每 小 时 2 英里 有 旦 预测 同 
期 为 一 星期 7 天 ， 每 天 24 人 小 时 不 中 断 。 


2008 年 ， 谷 歌 公司 为 网 页 版 的 谷歌 地 图 产品 开发 了 一 个 新 功能 
一 一 预测 用 户 未 来 一 段 行程 所 需要 的 区 驶 时 间 。 如 采 你 想 知 道 去 见 医 
生 开 和 车 需要 多 久 ， 只 要 和 输入 约见 医生 的 日 期 和 时 间 ， 谷 歌 地 图 就 可 以 
为 你 计算 和 预测 。 但 是 这 个 功能 很 快 被 取消 了 ， 并 且 至 今 也 没有 重新 
恢复 。 需 要 指出 的 是 ， 现 在 苹果 和 安 卓 手机 上 的 谷歌 地 图 应 用 都 可 以 
估算 区 驶 时 间 ， 但 是 并 没有 可 以 估算 未 来 旅行 的 雪 驶 时 间 的 功能 。 


尽管 这 些 交 通 预 测 系统 已 经 相当 完善 ， 但 在 意外 情况 发 生 时 它们 
还 是 可 能 会 犯错 。 比 如 一 辆 运输 鸡蛋 的 货车 侧 翻 ， 或 是 一 次 临时 的 道 
路 管制 等 ， 这 样 的 道路 意外 事故 的 发 生 几 乎 无 法 预测 。 但 是 ， 微 软 公 
司 的 研究 人 员 探 索 出 了 一 种 方式 来 预测 什么 时 候 有 可 能 发 生 这 些 意 
外 ， 他 们 称 之 为 “意外 事件 模型 ”。 这 项 技术 可 以 用 于 提升 交通 预测 的 
精确 度 ， 也 可 以 用 于 其 他 一 些 需 要 预测 的 领域 ， 比 如 健康 保健 、 和 军事 
战略 以 及 金融 市 场 等 。 


意外 事件 模型 是 微软 一 个 名 为 SmartPhlow 的 软件 开发 项 目的 成 
果 ， 该 项 目 是 由 埃 里 殉 ' 霍 维和 和 他 的 同事 们 于 2003 年 发 起 的 。 这 个 软 
件 可 以 展示 公路 上 的 交通 流 状况 ， 还 可 以 在 发 生意 外 事件 时 提醒 用 
户 ， 比 如 当 一 条 道路 被 临时 管制 ， 或 是 一 条 畅通 道路 突然 变 得 拥 培 。 
研究 人 员 通 过 采集 使 用 西雅图 多 年 的 交通 数据 ， 将 事故 、 天 人气、 了 日 
和 活动 数据 与 之 进行 关联 分 析 ， 并 将 每 天 的 时 间 切 分 为 多 个 时 长 为 15 
分 钟 的 片段 ， 对 每 个 片段 的 交通 状况 分 别 进行 计算 。 他 们 特别 关注 数 
据 与 一 般 模 式 有 显著 差异 的 情况 ， 即 异常 的 交通 状况 的 出 现 。 在 对 这 
些 意外 事件 进行 标注 之 后 ， (研究 人 员 发 现 ) 异常 情况 发 生前 30 分 钟 
内 的 事件 部 有 可 能 引发 交通 异常 数据 的 出 现 。 然 后 ， 人 研究 人 员 检 查 了 
这 些 意 外 事件 的 先决 条 件 来 研究 其 中 是 否 存 在 一 定 的 关系 模式 。 该 项 
研究 成 采 是 一 个 可 以 预测 大 约 50% 的 道路 意外 事故 ， 但 会 有 5% 的 错误 
率 的 软件 系统 。 


iE es SURE 


I-95 是 一 条 连接 马里 兰 和 佛罗里达 的 南北 向 公路 。I-95 廊 道 联合 
组 织 作 为 一 个 合作 机 构 ， 包 括 了 交通 部 门 ， 东 海岸 各 州 公共 安全 组 
织 、 港 口 和 交通 运输 组 织 ， 马 里 兰 大 学 以 及 Inrix 公 司 。 自 2008 年 ， 姜 
95 联 合 组 织 已 经 开始 研究 如 何 将 海量 的 交通 数据 转变 为 可 以 改善 交通 


网 状况 的 有 用 信息 ， 并 开展 了 一 个 基于 和 车载 GPS 等 公众 数据 的 ， 名 为 
VPP (车 辆 探索 项 目 ) 的 新 项 目 ， 并 计划 将 项 目 至 少 延长 至 2014 年 。 


这 个 项 目的 目标 是 通过 诸如 I95travelinfo.net 和 511 一 类 的 网 站 和 电 
话 服 务 ， 为 要 驶 者 提供 更 加 准确 的 信息 ， 并 且 帮 助 城市 规划 机 构 更 好 
地 进行 决策 。 比 如 ， 华 盛 顿 州 、 华 盛 顿 特 区 以 及 费城 的 规划 师 束 在 使 
用 VPP 项 目 数 据 来 评价 目前 公路 网 的 效率 。 这 是 通过 规划 改善 公路 状 
况 的 第 一 步 ， 从 而 最 终 减 少 道路 拥堵 并 改变 整体 交通 模式 。 


VPP 项 目的 大 量 数据 还 可 以 帮助 紧急 啊 应 团队 更 快 到 达 事 故 现 
场 。 例 如 ，2008 年 10 月 一 次 突 发 的 暴风 雪 中 ， 新 泽 西 的 交通 管理 员 通 
过 VPP 数 据 ， 发 现 了 80 号 州 际 公路 的 延伸 段 上 的 一 系列 事故 ， 从 而 快 
速 地 派出 了 应 急 处 理 团 队 ， 这 在 原本 基于 摄像 头 的 监控 系统 中 是 做 不 
到 的 。 


县 和 州 政府 也 可 以 使 用 交通 数据 在 灾难 发 生 时 更 快 玻 散 民 众 。 佛 
罗 里 达州 是 个 很 好 的 例子 ， 这 里 每 年 都 会 有 数 次 飓风 光顾 ， 为 保证 灾 
害 期 间 交 通 玖 获得 平稳 流畅 ， 该 州 方面 主 要 是 在 县 政府 层面 进行 协 
调 ， 另 一 方面 与 州 政府 的 各 部 门 在 更 高 层面 进行 协调 。 


佛罗里达 州 的 政府 部 门 通 过 实时 交通 数据 ， 可 以 获知 灾害 期 间 市 
民 的 驾车 行动 方 同 ， 并 通知 邻近 的 县 和 州 ， 以 保障 足够 的 资源 。 此 
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大 量 交 通 数 据 市 来 的 另 一 个 好 处 是 ， 我 们 可 以 以 乌 梧 视角 观察 城 
市 中 人 们 的 流动 方式 ， 这 对 于 流行 病 学 家 来 说 极 具 价值 。 研 究 人 员 如 


今 通过 交通 数据 ， 来 仍 踪 人 们 以 及 他 们 可 能 携带 的 病菌 是 如 何在 城市 
中 移动 的 。 


城市 流动 性 数据 可 以 用 于 疾病 传播 模型 ， 以 评估 疾病 是 从 何 处 发 
源 的 ? 将 传播 到 哪些 地 方 ? 以 及 将 以 什么 样 的 速度 传播 ? 这 些 信息 可 
以 进一步 被 用 于 制订 合理 的 隔离 和 接种 疫 丁 方案， 以 及 将 医疗 人 员 等 
质 源 在 正确 的 时 间 配 置 到 正确 的 地 点 。 


包括 亚 历 山 德 罗 : 韦 斯 度 尼 亚 尼 和 德 克 : 布 多 克 曼 在 内 的 许多 研究 
者 ， 都 利用 交通 数据 对 不 同 空间 范围 上 的 疾病 传播 网 络 中 的 流动 性 进 
行 建 模 。 韦 斯 皮 尼 亚 尼 和 他 的 同事 们 发 现 ， 城 市 范围 的 地 面 通勤 与 航 
空运 输 的 交通 流 有 所 不 同 。 城 市 旋 围 的 通勤 交通 与 空中 交通 相 比 ， 具 
有 数量 级 上 的 强度 更 高 ， 这 表明 城市 范围 内 人 们 有 越 来 越 多 样 化 的 互 
动 和 联系 。 这 一 发 现 强调 了 理解 不 同 范围 流动 性 数据 之 间 细 微 关 别 的 
重要 性 。 韦 斯 皮 尼 亚 尼 和 他 的 同事 们 提出 ， 全 球 疾病 网 络 模 型 中 应 该 
包括 城市 范围 的 模型 ， 从 而 使 尽 体 模型 更 加 精确 并 提供 多 层次 的 粒 
度 。 


预防 犯罪 


警察 部 | ] 当 然 有 采集 犯罪 数据 的 职责 案件 报告 中 需要 包括 非法 
嫌疑 活动 的 人 物 、 内 容 、 事 件 、 地 点 以 及 发 生 原因 等 记录 。 过 去 的 10 
年 里 ， 很 多 这 类 犯罪 数据 都 补 电 子 化 了 ， 这 整 为 数据 控 据 提供 了 可 能 
性 ， 从 中 得 到 的 模式 可 以 帮助 警察 部 门 做 出 更 好 的 决策 比如 周 五 的 
晚上 应 该 将 警车 派 到 哪些 地 段 ， 或 者 像 一 场 周 日 足球 赛 这 种 重大 活动 
应 该 配置 多 少 警 力 。 


纽约 市 的 数字 化 犯罪 统计 系统 Compstat 古 个 很 好 的 例子 ， 它 从 
1994 年 开始 投入 使 用 ， 如 今 已 经 在 全 美 多 个 城市 中 得 到 应 用 。 


Compstat 主 要 追踪 被 记 孙 的 非法 活动 中 的 长 期 趋势 。 富 兰 克 林 . 齐 姆 林 
在 他 2011 年 出 版 的 著作 《更 加 安全 的 城市 》 中 提出 ，Compstat 在 过 去 
几 十 年 里 对 纽约 犯罪 紊 的 下 降 具 有 积极 的 影响 。 通 过 Compstat 系 统 ， 
警察 部 门 可 以 在 预计 可 能 发 生 犯 罪 购 地方 配置 更 多 的 警力 。 


在 过 去 的 10 年 中 ， 很 多 警察 部 门 都 受到 了 Compstat 系 统 的 影响 ， 
但 也 推动 了 该 系统 的 新 进展 。 然 而 ，Compstat 数 据 一 直 只 能 用 于 每 周 
的 战略 部 署 讨 论 ， 而 且 需 要 依靠 人 们 来 识别 数据 中 的 模式 。 现 在 有 一 
些 狐 的 犯罪 妃 踪 系统 可 以 每 日 更 新 ， 并 依靠 算法 几乎 实时 地 预测 未 来 
可 能 的 犯罪 。 


2004 年 ， 来 目 卡 内 基 - 梅 隆 大 学 的 研究 人 员 与 匹 效 您 警察 部 门 合 
作 ， 开 展 了 实时 犯罪 追踪 的 很 多 基础 研究 工作 。 术 不 琳 :科恩 、 威 鹏 -区 
泵 以 及 安 德 烈 亚 斯 : 奥 利 布施 勒 格 尔 梳 理 了 匹 效 堡 市 从 1991 年 1 月 到 
1998 年 12 月 间 的 130 万 份 案件 报告 记录 的 犯罪 数据 ， 包 括 从 盗 贸 到 谋杀 
的 16 种 犯罪 类 型 。 人 研究 者 布 望 能 提前 一 个 月 预测 城市 中 可 能 发 生 的 犯 
罪 活动 ， 并 在 一 个 划分 为 104 个 地 块 单元 的 网 络 系统 中 预测 其 可 能 的 位 
置 ， 这 些 单元 每 个 履 凋 大 约 在 100 个 街区 的 范围 。 


研究 人 员 发 现 ， 他 们 可 以 找到 与 严重 犯罪 活动 相关 的 其 他 犯罪 指 
标 ， 并 确定 这 些 指标 的 影响 程度 。 利 用 这 些 信息 ， 他 们 开发 了 一 个 预 
测 模型 ， 帮 助 警 方 决定 应 该 问 哪 里 分 派 警力 ， 哪 里 的 警力 应 该 被 撤 
回 。 因 为 人 们 普 侦 认为 ,警察 的 存在 可 以 有 效 预 防 更 多 犯罪 的 发 生 。 
这 个 模型 主要 依靠 犯罪 活动 之 间 的 相关 性 进行 预测 。 人 研究 人 员 认 为 ， 
传统 方法 仅仅 根据 单一 犯罪 类 型 进行 趋势 分 析 ， 而 他 们 的 相关 犯罪 模 
型 与 传统 推断 方法 相 比 具有 显著 提升 。 


里 然 匹 效 堡 和 纽约 的 犯罪 率 是 有 所 下 降 的 ， 但 在 圣 克 和 鲁 效 市 却 在 
上 升 。2000~2011 年 ， 该 市 的 犯罪 数量 上 升 ， 而 更 不 幸 的 是 ， 由 于 州 预 
算 和 城市 预算 的 削减 ， 警 察 数 量 反 而 在 城 少 。2011 年 ， 圣 克 鲁 效 市 的 
警察 部 门 开 始 与 乔治 : 蒂 塔 、 乔 治 : 莫 勒 、 马 本 肖 特 ， 以 及 太夫 ' 布 兰 迁 


汉 姆 等 研究 人 员 合 作 ， 开 发 并 测试 了 一 个 有 效 的 犯罪 预测 系统 ， 以 协 
助 警 察 安 排 更 高 效 的 日 常 巡 逻 。 研 究 人 员 将 城市 划分 为 500 英 尺 (ZY 
152 米 ) 见方 的 网 格 ， 并 标注 上 过 去 8 年 圣 克 和 鲁 效 的 案件 报告 数据 。 与 
纽约 的 Compstat 系 统 不 同 ， 这 个 系统 每 日 更 新 数据 。 并 且 ， 它 还 采用 
了 以 前 用 于 预测 地 震 余 震 的 计算 机 模型 ， 并 将 其 很 好 地 应 用 于 预测 犯 
罪 活 动 ， 和 警方 可 以 通过 这 个 系统 得 到 每 日 更 新 的 犯罪 热点 地 区 。 据 
说 ， 这 个 系统 或 多 或 少 降低 了 犯罪 发 生 的 频率 。 然 而 ， 在 本 书写 作 时 
(2013 年 ) ， 还 没有 最 终 的 分 析 结 论 。 


与 圣 克 和 鲁 兹 一 样 ， 孟 菲 斯 市 在 21 世 纪 也 经 历 了 犯罪 率 的 上 升 。 但 
由 于 政府 工资 冻结 和 预算 紧缩 ， 没 法 雇用 更 多 的 警察 来 履 盖 更 多 的 城 
市 范围 ， 所 以 ， 在 2005 年 孟 非 斯 警察 部 门 开始 与 BM 公司 合作 ， 开 发 
了 第 五 章 中 提 到 的 “Blue CRUSH” 系 统 。 这 个 系统 使 用 了 过 去 10 年 中 的 
案件 报告 数据 ， 以 及 现在 警察 的 手持 数字 设备 中 的 实时 更 新 数据 。 基 
于 这 些 数据 ， 系 统 建立 了 犯罪 活动 、 位 置 和 其 他 一 些 变 量 ， 如 废弃 房 
屋 之 间 的 相关 性 。 除 了 协助 警方 安排 巡逻 地 区 外 ， 这 个 系统 还 能 帮助 
更 加 有 效 地 安装 安全 监控 摄像 头 ， 因 为 它 可 以 分 析 在 哪些 地 点 需要 安 
凌 摄 像 头 ， 哪 些 时 间 需 要 特别 监 探 。 在 使 用 Blue CRUSHAZa, mse 
斯 市 的 严重 犯罪 活动 数量 总 体 下 降 了 30%， 姑 力 犯罪 则 减少 了 159% © 


很 明显 ， 还 有 很 多 不 同 的 方法 和 模型 可 以 用 于 犯罪 数据 分 析 ， 它 
们 的 选择 取决 于 警察 部 门 需 要 解决 什么 类 型 问题 ， 以 及 需要 配置 哪些 
资源 。 除 了 可 以 减少 犯罪 活动 的 发 生 ， 这 些 系 统 还 可 以 协助 城市 政府 
部 门 更 加 合理 有 效 地 分 配 警 力 资 源 ， 特 别 是 在 圣 殉 鲁 效 和 理 菲 斯 这 种 
城市 预算 有 限 的 情况 下 。 


交通 和 犯罪 数据 部 很 过 用 于 建 模 和 预测 。 帮 助 建立 更 好 的 玖 散人 
群 、 应 对 紧急 情况 以 及 追踪 传染 病 的 扩散 机 制 ， 只 是 交通 数据 的 少数 
几 种 用 处 。 突 发 事件 建 模 ， 节 初 被 用 于 预测 意外 交通 状况 ， 之 后 也 被 
应 用 于 犯罪 事件 等 其 他 领域 。 


以 何 种 方式 来 应 用 犯罪 预测 系统 ， 以 及 该 系统 将 如 何 影 响 高 犯罪 
率 社 区 ， 是 开发 该 系统 时 需要 特别 注意 的 两 点 。 对 于 警方 来 说 ， 根 据 
直觉 和 工作 经 验 安排 茹 车 或 步行 的 巡逻 路 线 ， 并 前 往 潜 在 犯罪 居民 区 
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免 ， 等 行事 件 发 生 束 是 新 鲜 事 了 “。 如 采 没 有 恰当 的 培训 和 监管 ， 这 些 
系统 可 能 会 被 用 来 对 市 民 进行 定义 和 分 类 ， 从 而 可 能 打扰 普通 的 市 
民 ， 甚 至 导致 不 必要 的 抓 捕 。 犯 罪 预 测 系 统 的 作用 和 潮 力 令 人 印象 深 
刻 ， 这 些 系统 必然 获得 更 多 关注。 而 当 它们 被 广泛 使 用 时 ， 如 何 合理 
运用 系统 尤为 重要 。 或 许 在 这 些 新 技术 全 面 铺 开 之 前 ， 可 以 让 社区 负 
责 人 参与 到 这 些 技术 使 用 的 讨论 中 来 。 这 样 做 不 仅 能 听 到 普通 民众 的 
忧虑 并 建立 彼此 的 信任 ， 还 能 借助 基层 居民 的 深刻 见解 提高 犯罪 数据 
的 真实 度 。 通 过 检查 非法 活动 数据 在 现实 中 的 真实 状况 ， 建 立 一 个 相 
互 苯 重 的 沟通 方式 ， 将 是 保证 犯罪 预测 系统 项 目 整体 成 功 运行 的 有 效 
pa. 


| 当 现实 挖掘 的 规模 继续 扩大 时 ， 国 家 政府 、 大 型 企业 和 国际 组 ; 
: 织 就 开始 在 数据 的 采集 、 编 辑 和 传播 上 扮演 重要 的 角色 。 在 国家 层 : 
面 上 ， 研 究 人 员 和 企业 可 以 获得 更 大 范围 的 数据 来 源 ， 包 括 国家 人 
口 普查 、 通 话 记 录 、 主 要 互联 网 公司 如 谷歌 、 脸 谱 网 、 推 特等 ， 以 : 
: 及 有 限 的 一 些 银行 数据 。 


REALITY 
MINING 
Using Big Data 


to engineer a Better World 


第 七 章 
当 数 据 上 升 至 国家 层面 


当 现 实 挖掘 的 规模 继续 扩大 时 ， 国 家 政府 、 大 型 企业 和 国际 组 织 
束 开 始 在 数据 的 采集 、 编 辑 和 传播 上 扮 党 重 要 的 角色 。 在 国家 层面 
上 ， 人 研究 人 员 和 企业 可 以 获得 更 大 范围 的 数据 来 源 ， 包 括 国家 人 口 普 
查 、 通 话 记 录 、 主 要 互联 网 公司 如 谷歌 、 脸 谱 网 、 推 特等 ， 以 及 有 限 
的 一 些 银行 数据 。 当 然 ， 这 些 数据 来 源 中 有 些 相对 比较 容易 获得 ， 有 
些 则 相对 困难 。 


到 目前 为 止 ， 人 口 普查 数据 征 最 容易 获取 的 。 很 多 国家 把 他 们 的 
人 口 普查 结果 通过 网 络 向 公众 公布 ， 这 些 数据 可 以 被 下 载 、 可 视 化 以 
用 于 更 深入 的 人 研究。 男 外 ， 世 界 银行 开展 的 国际 研究 将 所 有 参与 国 的 
人 口 普查 数据 汇编 在 一 起 ， 对 其 所 有 成 员 国 来 说 束 像 一 个 一 站 式 的 信 


思 商 店 。 这 些 数据 是 完全 公开 的 ， 人 们 可 以 下 载 并 被 独立 地 分 类 和 分 
析 。 重 要 的 是 ， 世 界 银 行 气 供 了 开放 的 应 用 程序 编程 接口 ， 让 软件 开 
发 者 可 以 将 各 种 数据 整合 到 应 用 软件 中 。 谷 歌 吏 将 世界 银行 的 数据 整 
合 进 一 个 简单 的 可 视 化 工具 ， 显 示 在 其 搜索 结 末 中 ， 比 如 搜索 博 欧 瓦 
纳 的 人 口 时 ， 将 会 显示 世界 银行 提供 的 历史 数据 ， 以 及 展示 人 口 数 十 
年 来 变化 的 图 表 。 


另外 一 个 新 兴 的 数据 来 源 是 通话 数据 记录 ， 或 通话 细节 记录 ， 它 
们 统一 缩写 为 CDRs。CDRs 数 据 特 别 有 助 于 了 解 人 口 在 一 个 国家 或 一 
个 区 域内 的 流动 性 。 然 而 ， 与 人 口 普查 数据 和 世界 银行 数据 所 不 同 的 
是 ，CDRs 数 据 对 于 普通 的 企业 和 研究 人 员 来 说 很 难 获取 。 


作为 一 个 数据 集 ， 一 条 CDR 中 包含 了 通信 记录 (通话 和 短信 ) 以 
及 事务 性 事件 ， 包 括 呼叫 方 或 发 送 方 、 接 收 方 以 及 时 间 、 地 点 、 通 话 
时 长 等 信息 。 以 往 ，CDRs 数 据 仅 被 用 于 账单 事务 ， 但 2005 年 开始 ， 网 
络 服务 提供 商 和 大 学 的 研究 人 员 开 始 意识 到 这 些 数 据 的 价值 ， 特 别 是 
对 于 人 口 流 动 性 的 建 模 。 一 些 研 究 人 员 、 企 业 与 移动 运营 商 签订 了 协 
议 ， 可 以 在 一 定 限制 条 件 下 使 用 他 们 的 数据 。 一 些 移动 运营 商 愿意 分 
享 匿名 的 CDRs 数 据 ， 只 要 法 定 协 议 中 详细 规定 不 可 以 公开 所 有 权 以 及 
个 人 信息 。 这 些 协议 的 附加 条 款 往 往 会 规定 研究 人 员 需 要 癌 运 营 商 展 
示 他 们 打算 做 的 研究 的 价值 ， 比 如 ， 一 个 预测 性 “搅动 ”模型 的 开发 ， 
涉及 的 是 终止 订阅 和 产品 接纳 情况 。 


在 国家 层面 上 ， 我 们 也 同样 强调 主要 网 络 数据 采集 商 一 一 谷歌 、 
脸谱 网 和 推 符 的 重要 性 。 这 些 公司 对 使 用 它们 的 个 人 、 社 区 以 及 政府 
都 产生 了 深远 的 影响 ， 但 它们 作为 大 量 数据 采集 工具 的 功能 ， 在 国家 
层面 上 变 得 更 为 明显 。 互 联网 公司 采集 数据 的 一 个 显著 应 用 吏 是 定 同 
广告 。 但 这 些 数 据 还 有 很 多 未 开发 的 可 能 性 ， 包 括 定 同 的 市 场 调研 和 
疾病 追踪 〈 详 见 第 十 章 ) 。 推 符 的 设计 理念 ， 是 让 大 多 数 用 户 所 输入 


的 内 容 能 够 实时 公开 显示 ， 它 可 以 被 用 来 追踪 民众 的 情绪 ， 也 可 以 被 
用 来 追 踩 国 家 灾难 或 者 其 他 危机 发 生 时 的 资源 分 配 。 


一 些 关 于 谷歌 、 脸 谱 网 和 推 敌 的 应 用 会 在 第 八 章 中 详细 讨论 ， 还 
有 一 些 将 在 第 十 章 中 突出 强调 ， 因 为 这 些 国际 公司 在 全 球 层面 上 也 有 
很 大 的 影响 。 实 际 上 ， 本 书 的 第 四 部 分 和 第 五 部 分 提 到 的 一 些 数据 类 
型 ， 比 如 CDRs 数 据 、 网 络 公 司 拥有 的 数据 集 、 银 行 数据 等 ， 都 可 以 在 
国家 层面 和 国际 层面 采集 ， 并 在 之 后 被 应 用 于 这 两 个 规模 层面 。 本 章 
初步 展示 了 可 以 在 国家 层面 采集 的 一 些 数据 ， 并 讨论 了 如 何 处 理 这 些 
数据 。 我 们 同样 关注 隐私 问题 ， 特 别 征 在 匿名 CDRs 数 据 的 应 用 上 。 尽 
管 匿 名 记录 上 的 个 人 识别 信息 被 剥离 ， 但 通过 与 一 些 诸如 人 口 普 碍 数 
据 等 容易 公开 获取 的 信息 进行 交叉 分 析 ， 还 是 有 可 能 还 原 个 人 识别 信 
思 的 。 我 们 介绍 了 目前 正在 开发 的 一 种 很 有 潜力 的 方法 ， 可 以 让 研究 
人 员 和 企业 在 获取 CDRs 数 据 的 同时 保持 它们 的 匿名 性 。 


号 


AF 


当今 世界 的 大 多 数 国家 都 有 人 口 普 查 ， 其 中 多 数 国家 通过 网 络 公 
开发 布 这 些 数据 。 例 如 ， 美 国政 府 通过 一 个 名 为 美国 事实 查找 妖 
(American Fact Finder) 冉 的 网 站 公布 人 口 普查 数据 。 人 们 可 以 在 该 
网 站 通过 主题 (如 年 龄 和 收入 ) ， 地 理 〈 如 州 和 郡 ) ， 种 族 、 民 族 或 
部 落 ， 产 业 、 产 品 或 商品 名 称 进 行 搜 索 。 在 人 口 普 查 数据 之 外 ， 人 们 
还 可 以 下 载 其 他 的 研究 数据 ， 包 括 每 5 年 开展 一 次 的 经 济 普 查 ， 还 有 人 
口 预测 项 目 ， 该 项 目 公 布 最 狐 的 各 乡镇 、 城 市 、 州 和 国家 的 人 口 预 测 
数据 。 


2009 年 ， 美 国政 府 局 动 了 一 个 名 为 data.gov 的 在 线 数据 库 ， 提 供 来 
目 各 个 政府 机 构 的 超过 445 000 条 原始 数据 和 地 理 空间 数据 集 ， 所 含 门 


类 包含 和 商业、 艺术 、 娱 乐 和 出 行 、 选 举 、 对 外 援助 、 交 通 、 福 利和 其 
他 ; 这 些 数据 集 有 “性 别 / 种 族 发 展 趋势 ”美国 的 活跃 矿区 和 矿井 ”野马 
和 野 驴 数 量 统计 等。 这 些 数据 可 以 XM]、 文 本 或 CSV、KMJIKMZ 、 
Feeds、XIS 和 ESRI 的 Shapefile 格 式 下 载 。 此外， 还 有 一 些 常用 的 交互 
数据 集 拥有 自己 的 应 用 程序 编程 接口 ， 开 发 人 员 能 够 把 数据 生成 的 地 
图 和 图 表 整 合 到 网 页 应 用 中 。 


世界 银行 是 国家 层面 公共 数据 的 一 个 巨大 的 来 源 。 这 个 国际 机 构 
提供 的 数据 目录 包括 数据 库 、 预 定义 格式 的 表格 、 报 告 以 及 其 他 资 
源 。 总 体 上 ， 该 网 站 提供 超过 7 000 个 指标 的 下 载 ， 涵 盖 了 从 农业 土地 
比例 到 受 教育 比例 等 各 方面 数据 。 另 外 ， 该 网 站 提供 超过 200 个 国家 和 
经 济 体 的 数据 ， 从 主题 上 分 有 健康 、 气 候 变 化 等 ， 从 指标 上 分 则 包括 
国内 生产 总 值 、 汽 油价 格 等 。 


世界 银行 发 展 数据 中 心 时 整合 了 数据 采集 和 统计 分 析 ， 并 维护 
世界 银行 ， 用 于 制订 援助 计划 、 评 估 贫 困 程 度 以 及 开展 研究 的 一 系列 
数据 库 。 大 部 分 数据 来 自 187 个 成 员 国 ， 它 们 和 世界 银行 及 其 合作 伙伴 
共同 致力 于 改善 国家 统计 系统 的 能 力 、 效 率 和 效力 。 


世界 银行 宣称 ， 它 们 采用 的 是 目前 可 能 的 ， 最 专业 的 数据 标准 来 
运 宫 ， 使 用 两 大 主要 框架 来 评 信 数据 统计 系统 ， 一般 数据 发 布 系统 和 
数据 质量 评 信 框架， 两 者 都 古 和 国际 货币 基金 组 织 共同 人 研发 的 。 然 
而 ， 世 界 银行 也 承认 数据 集 也 存在 不 一 致 现象 ， 因 为 不 同 的 参与 国 数 
据 统 计 的 时 间 和 编制 报告 的 方法 不 同 : 所 有 数据 都 是 通过 传统 调研 的 
方式 获得 ， 从 而 导致 数据 集 的 数量 相对 较 少 。 因 此 ， 世 界 银行 建 议 在 
组 合 数 据 集 的 时 候 要 多 加 小 心 。 束 其 本 里 而 言 ， 世 界 银行 提供 了 一 套 
整合 经 济 数 据 、 增 长 率 计 算 以 及 受 汇率 影响 的 换算 系数 的 方法 ， 这 使 
得 跨 数据 集 的 比较 尽 可 能 的 精确 。 


世界 银行 的 网 站 除了 搜索 数据 集 和 下 载 表格 外 ， 用 户 还 可 以 通过 
三 个 不 同 的 应 用 程序 编程 接口 来 搂 入 数据 : 一 个 接 入 指标 ， 一 个 接 入 
项 目 (世界 银行 运营 的 数据 ，， 还 有 一 个 接 入 世界 银行 的 金融 数据 。 
这 些 接 口 使 应 用 程序 可 以 在 可 调 下 参量 范围 内 通过 于 得 询 引用 超过 3 
000 个 指标 。 世 界 银 行 提供 的 应 用 程序 编程 接口 可 以 获取 近 50 年 间 的 许 
多 数据 集 ， 并 包括 了 已 经 结束 的 项 目 、 活 路 的 项 目 和 正在 进行 的 项 目 
的 数据 。 


谷歌 在 一 个 名 为 谷歌 公共 数据 管理 器 的 可 视 化 和 比较 工具 中 整合 
了 世界 银行 的 数据 ， 让 用 户 可 以 对 来 目 世界 银行 的 数据 和 其 他 60 个 不 
同 公共 数据 集 的 数据 进行 交叉 分 机。 然而， 要 进行 更 复杂 的 分 析 的 
话 ， 用 户 必 须 单 独 访问 每 个 数据 集 各 目的 来 源 网 站 。 


通话 记录 


为 了 给 客户 生成 账单 并 了 解 其 网 络 上 的 通话 负载 ， 移 动手 机 网 络 
服务 商会 记录 它们 用 户 的 手机 使 用 情况 。CDRs 数 据 中 包含 了 一 个 通话 
或 一 段 短 消息 发 送 的 时 间 、 大 概 位 置 (通过 通信 基站 的 编号 ) 及 其 接 
收 者 等 信息 。 因 为 当今 世界 手机 高 度 普及 ，CDRs 数 据 对 于 人 口 流动 性 
研究 来 说 是 非常 有 吸引 力 的 位 置信 息 来 源 。 另 外 ，CDRs 数 据 提 供 的 位 
置信 息 价 格 便宜 ， 尤 其 是 与 需要 耗费 大 量 人 力 的 小 规模 调研 相 比 。 


近年 来 ， 网 络 服务 供应 商 、 大 学 以 及 初创 公司 的 研究 人 员 开始 注 
意 到 这 种 类 型 的 数据 对 人 口 流 动 性 和 社交 网 络 研 究 模 型 的 影响 (第 八 
章 介绍 了 基于 CDR 模 型 的 特定 应 用 程序 ) 。 然 而 ， 对 于 大 多 数 研 究 人 
员 和 企业 来 说 ， 获 取 这 类 CDRs 数 据 十 一 个 极 大 的 挑战 。 出 于 隐私 考虑 
并 依照 所 有 权 规 定 ， 移 动 运营 丙 不 能 对 公众 公开 它们 的 数据 。 因 此 ， 
如 有 果 一 个 研究 人 员 想 要 获取 这 些 数据 ， 他 需要 能 够 提供 特定 的 研究 技 
术 来 改善 模型 ， 或 是 提供 对 于 运 介 商 来 说 有 价值 的 其 他 东西 ， 比 如 评 


价 一 个 客户 终止 他 的 移动 服务 的 可 能 性 。 如 采 研 究 人 员 或 企业 进行 
CDRs 数 据 研 究 的 目的 不 能 直接 满足 移动 运 宫 商 的 需求 ， 那 么 他 们 可 能 
需要 额外 伦 扣 研究 时 间 为 运营 商 提 供 直 接 援 助 。 


移动 运 香 商 在 分 享 这 些 数 据 上 犹 驳 原因 ， 部 分 来 和 目 与 公众 相关 的 
隐私 考虑 。 而 且 这 些 犹 驳 有 充分 的 理由 。 首 先是 2005 年 ，《 纽 约 时 
报 》 上 曝光 了 一 个 经 美国 政府 批准 ， 出 于 国家 安全 的 考虑 对 AT&T 的 
CDRs 数 据 进行 挖掘 的 项 目 ， 然 后 是 近 几 年 揭露 的 美国 国家 安全 局 
PRiSM 数 据 挖掘 项 目 。 于 是 ， 从 2005 年 开始 ， 这 些 数据 的 敏感 性 进入 
了 公众 视野 。 由 此 引发 了 一 些 诉讼 ， 一 部 分 案件 中 政府 被 认定 为 非法 
监视 ， 另 外 一 些 则 由 于 技术 细节 被 推翻 。 


尽管 政府 无 证 搜索 特定 客户 的 CDRs 数 据 与 研究 人 员 通 过 CDRs 数 
据 对 人 们 的 群体 行为 进行 建 模 不 同 ， 移 动 运营 商 仍然 对 广泛 公开 这 些 
数据 很 谨慎 。 即 便 大 的 数据 集 都 是 匿名 的 ， 并 且 诸 如 手机 识别 码 和 手 
机 号 码 的 客户 识别 信息 被 剥离 ， 个 人 的 识别 信息 仍然 有 可 能 被 重新 获 
得 。 以 往 研 究 显 示 ， 即 便 很 多 敏感 信息 如 名 字 、 地 址 和 社会 保险 号 码 
不 可 获 了 到， 通过 另 一 些 识别 信息 ， 例 如 性 别 、 生 日 、 邮 政 编码 ， 一 个 
人 还 是 可 能 被 识别 出 来 。 通 过 这 三 个 识别 信息 与 人 口 普 查 数据 交叉 分 
析 ，63%~87% 的 美国 人 口 (取决 于 人 口 普 查 年 份 ) 可 以 被 分 别 识别 出 
来 。 


在 一 个 对 CDRs 数 据 记 录 去 匿名 化 的 案例 中 ，Sprint 公 司 的 研究 人 
员 使 用 的 数据 集 覆 盖 了 美国 超过 50 个 州 的 2 500 万 手机 用 户 所 拨打 的 
300 亿 通电 话 。 研 究 人 员 推 断 每 个 用 户 的 种 用 地 点 ， 并 将 其 与 公开 的 普 
查 数据 相关 联 。 人 研究 人 员 得 到 的 结论 是 ， 只 要 有 足够 的 时 间 通 过 手机 
位 置 来 推断 常用 地 点 ， 例 如 “家 ”和 “单位 *"， 基 本 上 所 有 的 用 户 都 能 被 
识别 出 来 。 他 们 建议 ， 为 了 保证 数据 的 匿名 性 ， 至 少数 据 的 时 间 和 空 
间 信 息 必 须 模糊 。 这 意味 着 数据 最 好 是 在 一 天 之 内 被 采集 ， 而 不 是 经 
过 一 个 月 ， 并 且 不 是 采 集 超过 一 个 通信 基站 所 徐 盖 地 理 范 围 的 数据 。 


AT&T 的 人 研究 人 员 试 图 让 这 些 使 得 CDRs 数 据 变 得 有 价值 的 信息 可 
以 被 大 众 获 取 ， 但 同时 注重 保护 隐私 。 普 林 斯 顿 大 学 的 布 伯 伦 : 易 院 曼 
和 AT&T 的 拉 莹 : 卡 塞 雷 斯 以 及 他 们 的 同事 合作 的 一 个 项 目 叫 作 WHeRe 
(“ 从 区 域 中 找 出 单位 和 家 庭 ? 的 缩写 ) ， 致 力 于 为 特定 城市 开发 手机 
用 户 的 合成 模型 。 通 过 使 用 AT&T 实 证 数据 中 提取 的 空间 输入 记录 和 
时 间 可 能 性 分 布 数据 ，WHeRe 可 以 为 综合 手机 用 户 们 创建 数据 。 合 成 
CDRs 数 据 被 应 用 在 纽约 和 洛杉矶 大 都 市 区 ， 并 且 通 过 了 这 两 个 城市 中 
数 十 万 手机 所 产生 的 数 十 亿 的 匿名 位 置 样本 的 验证 。 这 些 合成 的 CDRs 
数据 的 主要 优点 是 ， 它 们 维护 了 个 人 的 隐私 ， 因 为 没有 一 个 数据 是 从 
真正 的 用 户 而 来 。 另 外 ， 人 研究 人 员 宣 称 WHeRe 比 其 他 手机 数据 建 模 的 
方法 更 精确 。 (例如 ， 每 天 活动 的 范围 落 在 真实 范围 的 一 英里 范围 
内 。) 尽管 在 这 个 研究 阶段 仍然 有 很 多 需要 做 的 ， 但 这 类 项 目 会 让 人 
们 获得 更 多 的 CDRs 数 据 类 型 。 


SK > Hooves A) > FEE 


对 这 三 个 网 络 巨头 不 需要 任何 介绍 ， 但 本 小 地 要 提 到 三 者 采集 的 
一 些 特定 数据 ， 以 及 总 体 来 说 三 者 之 间 获 取 这 些 数据 的 不 同方 式 。 合 
歌 的 数据 采集 在 早期 束 已 经 进行 了 扩张 ， 那 时 他 们 仅仅 监控 用 户 的 搜 
索 词 。 因 为 它 现在 拥有 并 运营 一 系列 不 同 种 类 的 网 络 服务 ， 包 括 Gmail 
电子 邮件 、 合 歌 + 社交 网 络 、Youtube 视 频 网 站 以 及 Chrome 浏 览 絮 ， 相 
比 以 前 ， 它 获取 了 更 多 个 人 用 户 的 数据 。 如 果 Chrome 浏 览 絮 的 “ 即 
时 ”功能 被 打开 ， 合 歌 公司 束 会 记录 用 户 在 搜索 栏 输 入 的 搜索 词 和 网 
址 。 另 外 ， 出 于 广告 目的 ， 谷 歌 还 记录 用 户 所 观看 的 Youtube 视 频 ， 在 
Google+ 上 的 操作 ， 以 及 通过 Gmail 发 送 邮 件 的 文本 内 容 。 


尽管 普通 人 不 能 挖掘 全 部 的 谷歌 搜索 词 和 用 户 数据 ， 但 有 一 些 方 
法 可 以 获取 到 某 些 类 别 的 数据 。 例 如 ， 通 过 加 入 合 歌 的 AdSense 广 告 服 


务 ， 人 们 可 以 深入 了 解 某 些 通过 Gmail 发 送 或 接收 的 电子 邮件 中 可 能 
现 的 特定 的 词 或 短语 。 个 人 可 以 通过 互联 网 服务 商 进行 查阅 ， 获 取 在 
Gmail 中 收 到 这 些 广告 的 人 数 以 及 他 们 的 位 置信 息 ， 借 此 在 使 用 这 些 词 
或 短语 的 广告 况 价 中 胜出 。 通 过 这 种 方法 ， 人 们 可 以 了 解 特 定 的 电子 
邮件 流行 语 ， 并 有 可 能 发 现 不 同 国家 的 趋势 或 流行 观点 。 


与 谷歌 相似 ， 脸 谱 网 也 提供 广告 网 络 。 当 你 发 布 一 个 广告 的 时 
候 ， 你 选择 想 要 关联 的 关键 词 ， 这 则 广告 会 随 之 出 现在 个 人 信息 中 包 
合 这 些 关键 词 的 人 的 页 面 上 。 因 为 锁定 广泛 的 人 口 统计 资料 或 获取 个 
人 资料 上 的 个 别 信息 ， 如 地 址 (市 、 州 、 省 或 国家 ) 、 人 口 信息 (年 
龄 层 、 性 别 、 语 言 、 感 情 状 况 ) 、 兴 趣 爱 好 、 教 育 和 工作 状况 等 ， 都 
是 有 可 能 的 。 尽 管 脸谱 网 并 没有 向 广告 发 布 者 提供 浏览 广告 的 脸谱 网 
用 户 的 个 人 信息 ， 但 广告 商会 获得 与 广告 条 件 相 匹配 的 用 户 数量 量 
级 。 


AdSense 和 脸谱 网 广告 都 有 两 种 收费 方式 : 通过 每 次 点 击 付费 以 及 
每 和 后 次 浏 贤 付 费 。 两 者 都 可 以 通过 各 目 公 司 的 网 页 竞价 购买 。 这 两 家 
公司 提供 广告 的 衡量 数据 ， 对 试图 卖 产 品 或 服务 的 人 来 说 很 有 用 。 这 
些 衡 量 数据 包括 广告 个 点 击 的 次 数 ， 广 告 在 不 考虑 点 击 时 被 展示 给 用 
户 的 次 数 〈 浏 览 ) ， 广 告 获 取 的 点 击 量 除 以 广告 展示 量 (点 击 率 ) ， 
以 及 每 获得 一 次 点 击 需要 付 多 少 钱 (平均 点 击 付费 ) 。 两 家 公司 同样 
也 都 提供 总 体 统计 数据 ， 比 如 一 个 广告 出 现在 电子 邮件 或 个 人 页 面 的 
总 数 。 这 个 信息 可 以 用 于 判断 不 同人 口 对 于 某 个 产品 的 大 体 观 点 。 


脸谱 网 同样 提供 一 个 应 用 程序 编程 接口 ， 以 便 应 用 开发 者 在 开发 
应 用 程序 的 时 候 调 用 脸谱 网 的 用 户 信息 。 从 这 些 应 用 程序 中 ， 应 用 开 
发 者 可 以 获取 一 个 脸谱 网 用 户 在 隐私 设置 中 允许 显示 的 所 有 信息 ， 包 
括 手 机 号 码 、 联 系 人 清单 、 状 态 更 新 以 及 其 他 个 人 识别 信息 。 


一 些 最 党 欢迎 的 脸谱 网 应 用 ， 比 如 由 社交 游戏 公司 星 佳 开 发 的 那 
些 ， 不 仅仅 包含 个 人 信息 识别 ， 同 时 还 采集 玩家 的 行为 和 习惯 。 数 以 


百 计 的 手机 应 用 拥有 多 达 百 万 的 用 户 ， 这 在 很 大 程度 上 是 由 于 它们 提 
供 的 某 个 特定 功能 会 病毒 式 的 传播 ， 或 者 是 可 以 提供 特别 令 人 满意 的 
结 打 。 简 单 地 设计 一 款 采 集 信息 的 应 用 远 远 不 够 ， 它 必须 变 得 足够 受 
欢迎 ， 才 能 提供 足够 样本 数量 以 满足 使 用 。 然 而 ， 手 机 应 用 很 难 获 得 
显著 规模 的 样本 群 。 


推 等 跟 谷歌 以 及 脸谱 网 都 有 很 大 的 不 同 ， 写 的 大 多 数 用 户 数据 是 
公开 的 。 推 特 提供 一 个 名 为 “Twitter fire hose” 的 应 用 程序 编程 接口 ， 可 
以 获取 连续 的 数据 流 。 由 于 部 分 推 文 局 包含 位 置信 息 ， 这 些 数据 流 
可 以 用 于 发 据 一 个 国家 的 民众 情绪 。 第 八 革 中 更 深入 地 介绍 了 专门 分 
析 推 等 数 据 的 应 用 程序 ， 以 及 如 何 利用 它们 发 现 国家 层面 上 的 趋势 。 
然而 ， 推 竺 数据 的 分 析 所 面临 的 最 大 挑战 是 如 何 从 巨大 的 数据 流 中 找 
到 有 用 的 内 容 。 推 文 包含 大 量 无 意义 的 内 容 ， 比 如 对 话 的 片段 、 链 
接 、 混 杂 的 标签 以 及 缩写 等 ， 这 些 对 于 分 析 来 说 都 是 挑战 。 


银行 交易 


银行 多 易 是 男 一 个 国家 层面 的 信息 来 源 ， 但 需要 注意 的 是 商业 交 
易 的 数据 基本 上 不 可 能 锌 获取 。 银 行 第 第 使 用 数据 分 析 来 预防 诈骗 ， 
或 预测 某 个 人 更 换 银 行 的 可 能 性 ， 或 者 根据 个 人 消费 习惯 和 风险 承受 
能 力 调 整 利率 。 对 于 研究 人 员 和 企业 来 说 ， 客 户 的 花 销 数据 能 够 为 迁 
移 率 以 及 策略 制定 的 研究 提供 深刻 见解 。 因 为 位 置 是 与 购物 这 个 特定 
的 行为 结合 在 一 起 的 ， 所 以 研究 人 员 可 以 借 此 对 一 个 人 的 经 济 行为 有 
更 全 面 的 了 解 ， 甚 至 提供 一 些 CDRs 数 据 无 法 提供 的 信息 。 


2008 年 美国 银行 和 麻 省 理工 学 院 合 作 ， 让 研究 人 员 调 查 前 者 包含 
800 万 条 客户 交易 的 数据 库 。 凯 瑟 琳 . 克 鲁 姆 关注 的 是 包含 一 万 名 客户 
在 2006~2009 年 交易 的 子 样 本 ， 主 要 指标 包括 交易 数 据 、 总 量 ， 是 否 使 


用 支票 、 借 记 卡 或 贷 记 卡 ， 商 户 ， 商 户 类 别 码 ， 以 及 交易 是 在 线 交 易 
还 十 线 下 交易 等 。 人 研究 中 涉及 的 交易 尽 额 达到 每 月 300 亿 ~350 亿 美元 。 


这 类 数据 不 是 那些 有 求知 欲 的 研究 人 员 在 实验 室 中 每 天 都 能 查阅 
的 数据 。 但 像 北 卡罗来纳 州 的 Tresata 公 司 这 类 目标 明确 的 初创 企业 ， 
有 可 能 可 以 成 为 大 银行 的 合作 伙伴 ， 拓 供 专 门 针 对 金融 业 的 结构 化 和 
非 结 构 化 数据 进行 数据 分 析 的 平台 。 


Intuit 公 司 旗下 的 金融 公司 Mint 在 金融 交易 数据 流 中 也 占有 一 席 之 
地 ， 这 家 公司 提供 的 客户 产品 能 直接 将 客户 连接 到 线 上 消费 退路 系 
统 。Mint 拥 有 超过 400 万 用 户 ， 并 能 将 个 人 消费 模式 可 视 化 ， 以 及 提供 
信用 卡 等 产品 的 促销 信息 。 同 时 它 还 可 以 直接 获取 目 家 百 万 级 别 客户 
的 交易 信息 。 通 过 这 些 信息 ， 该 公司 在 推广 产品 时 就 可 以 根据 个 人 的 
消费 模式 有 的 放 矢 。 而 且 通 过 这 400 多 万 用 户 的 交易 数据 ， 该 公司 可 以 
对 经 济 的 健康 程度 进行 综合 判断 ;并 且 除 了 对 某 个 客户 信用 卡 使 用 兴 
趣 这 类 简单 推断 之 外 ， 在 更 大 层面 上 进行 一 些 预 测 。 


尽管 想 要 获取 公开 发 布 数据 以 外 的 数据 并 不 容易 ， 但 仍然 有 机 
会 。 虽 然 对 大 多 数 人 来 说 通话 数据 记录 都 无 法 获得 ， 但 因为 越 来 越 多 
的 手机 运 襄 丙 看 到 了 与 初创 企业 进行 合作 的 价值 一 一 后 者 可 以 为 运营 
商 的 记录 提供 深刻 见解 ， 就 像 有 些 大 学 也 已 经 开始 进行 的 类 似 合作 ; 
因此 通话 记录 目前 已 经 可 以 在 有 限 范 围 内 被 共 圣 。 像 WHERE 这 样 可 以 
生成 合成 数据 集 的 项 目 ， 如 采 能 够 超越 城市 界限 被 广泛 应 用 的 话 ， 也 
将 成 为 一 个 重要 工具 。 


合 歌 和 脸谱 网 向 有 兴趣 打造 广告 并 愿意 为 广告 付费 的 公司 或 个 人 
提供 他 们 所 需 的 数据 。 这 些 广告 基本 上 都 是 面 回 大 范围 跨 区 域 中 使 用 
特定 搜 索 词 或 拥有 特定 兴趣 的 人 。 跨 人 和 人口、 路 区 域 的 高 度 具 体 化 数 
据 ， 目 前 还 是 一 个 相对 人 欠 开 发 的 资源 。 同 样 的 ， 推 特 已 提供 更 多 有 价 
值 的 现 有 人 信息， 虽然 这 些 数据 的 分 析 挑 战 更 大 。 


大 银行 数据 可 能 是 这 个 层面 上 最 难 获 取 的 数据 ， 然 而 ， 移 动 运营 
商 模型 有 可 能 也 可 以 应 用 于 金融 业 ， 如 果 该 行业 和 那些 可 以 提供 某 些 
价值 的 研究 人 员 及 初创 企业 合作 。 人 金融 机 构 可 能 会 发 现 一 些 现 实 挖掘 
从 业者 能 提供 有 用 的 合成 金融 数据 集 。 尺 管 大 金融 数据 目前 仍然 不 适 
合用 于 范围 很 广 的 应 用 程序 ， 但 可 以 肯定 的 是 ， 这 些 数据 绝对 有 可 利 
用 的 空间 。 同 样 的 ， 当 这 个 层面 上 越 来 越 多 的 数据 被 应 用 ， 数 据 卫 士 
们 可 能 会 进一步 开放 数据 的 获取 途径 。 下 一 草 将 会 讨论 这 类 数据 的 一 
些 可 能 性 应 用 的 细节 。 


1. & 2 {2 JS Whttp://factfinder.census.gov/faces/nav/jsf/pages/index.xhtml ° 
2. 更 多 关于 世界 银行 发 展 数 据 中 心 的 信息 见 


http://data.worldbank.org/about/development—data—group ° 


3. EX: 指 在 推 特 上 发 的 内 容 ， 包 括 文 字 、 图 片 等 。 一 一 编者 注 


第 八 章 
让 大 数据 发 挥 作 用 的 最 佳 方法 


国家 数据 库 对 于 理解 怎样 进行 资源 分 配 和 设计 政策 非常 重要 。 但 
更 重要 的 是 要 找到 让 数据 发 挥 作用 的 最 佳 方法 。 人 口 普 查 、data.gov 网 
站 以 及 世界 银行 的 数据 都 提供 了 关于 国家 规模 人 口 的 重要 解读 ， 但 这 
些 观点 往往 是 静态 的 。 这 些 和 货源 由 于 受到 传统 的 数据 采集 技术 的 限 
制 ， 提 供 的 只 是 数据 在 一 定时 间 和 地 点 条 件 下 的 简单 描述 。 通 过 数据 
的 可 视 化 ， 如 时 间 线 、 地 图 、 图 表 等 ， 政 集 制定 者 以 及 非 政 府 组 织 可 
以 看 到 这 些 大 量 的 、 动 态 的 数据 如 何 通过 不 同 的 方法 被 划分 、 切 割 、 
交叉 引用 。 数 据 可 视 化 的 结果 可 以 被 用 于 为 贫穷 和 饥饿 的 人 群 提供 更 
好 的 服务 ， 更 好 地 理解 选民 行为 ， 以 及 对 之 前 被 掩盖 的 行业 进行 早期 
BCT ° 


通过 可 视 化 来 发 现 这 些 潜 在 的 应 用 有 很 多 方式 。 合 歌 提供 了 一 个 
名 为 “谷歌 公共 数据 管理 器 * 的 工具 ， 使 用 世界 银行 以 及 其 他 数据 集 ， 
让 人 们 对 一 段 时 间 内 不 同 的 统计 数据 进行 比较 。Data.gov 网 站 链接 了 
很 多 美国 政府 和 非 政 府 组 织 的 可 视 化 数据 ， 并 党 将 这 些 数 据 在 地 图 上 
进行 县 加 。 


一 个 名 为 Development Seed 的 数据 可 视 化 组 织 ， 相 较 于 其 他 数据 
来 源 选 择 了 使 用 世界 银行 的 数据 ， 并 创建 了 一 个 互动 地 图 。 而 它 的 子 
计划 Mapbox， 则 让 其 他 人 可 以 通过 开放 数据 简单 快速 地 制作 互动 地 
。Development Seed 组 织 进 行 的 数据 可 视 化 通常 有 特定 的 目标 ， 
如 “识别 关键 问题 、 用 战略 思维 发 据 机 会 、 建 立 解决 方 宁 及 设计 交 
流 ”。 例 如 ， 他 们 的 可 视 化 项 目 关 注 非洲 之 角 饥 俄 问题 的 发 展 趋势 ， 以 
及 阿富汗 的 公平 选举 。 


在 国家 层面 ， 数 据 集 之 间 的 一 个 主要 不 同 点 是 它们 的 更 新 速度 。 
人 口 普 查 数 据 和 世界 银行 的 数据 更 新 得 很 慢 ， 然 而 ， 手 机 数据 的 更 新 
则 非常 快 。 第 七 革 提 到 的 CDRs 数 据 能 够 近乎 实时 地 提供 人 们 的 移动 性 
言 轧 。 将 这 些 新 的 移动 性 信息 和 手机 CDRs 的 历史 数据 结合 起 来 ， 工 程 
师 可 以 获得 人 口 移动 和 活动 网 络 的 总 体 情况 。 通 过 这 些 信息 ， 类 似 将 
贫民 审 的 人 口 流动 和 主要 粮食 的 价格 相关 联 的 一 类 研究 融 成 为 可 能 。 
这 个 模型 最 终 可 用 于 辅助 预测 人 口 的 大 量 涌 入 ， 从 而 帮助 管理 者 在 正 
确 时 间 正 确 地 点 分 配 正 确 的 资源 。 


本 间 除 了 探索 人 口 普查 数据 和 CDRs 数 据 的 综合 运用 之 外 ， 还 介绍 
了 使 用 谷歌 和 脸谱 网 的 广告 网 络 来 实时 发 掘 国家 层面 多 数 派 观点 的 方 
法 。 从 某 种 角度 来 说， 这 种 方法 像 是 建立 了 一 个 个 人 的 民意 调研 
提出 一 个 等 别 的 问题 ， 并 使 其 舍 有 能 够 使 人 想起 你 的 广告 的 搜索 词 或 
天 键 字 ， 然 后 只 需要 价 单 地 监控 相关 指标 即 可 。 通 过 这 种 方法 ， 人 们 
可 以 通过 创建 一 系列 的 单 变 量 民意 测验 来 获得 某 个 特定 人 群 的 观点 和 
感受 。 比 如 说 ， 人 们 可 能 会 跟 中 那些 在 某 个 特定 的 政治 候选 人 脸谱 网 
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另外 ， 本 章 还 介绍 了 联合 国 的 全 球 脉动 项 目 ， 该 项 目 通过 采集 推 
等 公司 的 全 球 第 四 大 市 场 印 度 尼 西 亚 的 推 文 信 息 ， 来 更 好 地 了 解 当地 
居民 承受 的 压力 。 通 过 推 文 内 容 分 析 ， 这 个 项 目 可 以 分 析 人 们 有 关 燃 
料 、 食 物 、 债 务 以 及 其 他 能 暗示 压力 的 因素 ， 从 而 预测 危机 。 


最 后 ， 我 们 讨论 了 新 兴 的 金融 数据 分 析 领 域 的 应 用 。 相 对 难以 获 
得 的 金融 数据 ， 特 别 是 那些 实时 采集 和 分 析 的 数据 ， 可 以 展现 一 个 国 
家 即时 的 经 济 健康 状态 和 福利 状况 。 


国家 制定 公共 政策 时 ， 拥 有 不 同 区 域 的 需求 、 资 源 以 及 人 口 组 成 
等 大 量 的 数据 是 很 重要 的 。 


世界 银行 有 200 多 个 国家 提供 的 超过 7 000 个 指标 ,涵盖 了 从 教育 
水 平 到 军费 开 文 等 多 个 方面 ， 从 中 获取 最 重要 的 信息 可 能 会 有 一 定 的 
困难 。 为 了 弄 明 白 这 些 数据 集 ， 世 界 银行 提供 了 应 用 程序 编程 接口 ， 
让 其 他 机 构 甚 至 个 人 软件 开发 者 部 可 以 授 入 这 些 数 据 。 合 歌 的 公共 数 
据 管理 器 是 一 个 方便 接 入 和 使 用 的 例子 ， 通 过 把 世界 银行 的 数据 和 其 
他 60 个 公开 数据 集 相 结合 ， 谷 歌 的 这 个 互动 工具 可 以 让 人 们 看 到 一 段 
时 间 内 的 发 展 趋势 ， 也 可 以 比较 不 同 的 国家 和 不 同 的 统计 数据 ， 还 可 
以 回答 诸如 “哪个 国家 的 识字 率 正 在 提高 ? ”这 会 怎样 影响 GDP 的 改 
变 ? ”之 类 的 问题 。 


华盛顿 市 的 一 个 数据 可 视 化 组 织 Development Seed 采 用 的 方法 和 
谷歌 不 同 ， 它 们 关注 某 些 特定 的 问题 ， 并 创建 风格 化 、 视 觉 上 引 人 人 入 
胜 的 地 图 和 图 表 。 另 外 ，Development Seed 网 站 的 开发 设计 人 员 与 合 
作 机 构 紧 密 互动 ， 力 求 寻找 以 可 视 化 回答 问题 的 最 佳 途径 ， 并 最 终 影 
吧 到 政策 制定 。 该 组 织 最 近 的 产品 是 Mapbox 应 用 程序 ， 该 程序 是 研究 
者 为 了 使 不 同 的 开放 数据 能 够 更 容易 、 更 快捷 地 被 公众 获取 所 做 的 一 
项 尝试 。 


Mapbox 项 目的 一 个 很 有 分 量 的 案例 束 是 对 非洲 之 角 2011 年 大 饥 充 
的 影响 进行 的 制图 ， 这 次 大 饥 亮 是 由 干旱 、 冲 突 以 及 食物 价格 上 涨 等 
多 方 因素 共同 造成 的 ， 它 影响 了 1 300 万 人 口 。 它 使 用 了 来 自 美国 国际 
开发 敬 和 联合 国人 道 主 义 事务 协调 厅 的 数据 ， 该 组 织 创建 了 当前 以 及 
预计 的 饥 序 程度 和 干旱 状况 的 地 图 。 这 些 地 图 可 以 被 修改 ， 这 样 人 们 
束 可 以 在 已 有 的 内 容 上 增加 不 同 的 信息 图 层 。 但 其 主要 目的 古 让 更 多 
的 人 了 解 这 次 饥 函 ， 并 号 召 人 们 向 世界 粮食 计划 署 为 这 次 特定 的 需求 
捐 钱 。 


记者 和 政策 制定 者 一 样 ， 在 众多 指标 中 ， 都 对 能 够 反映 社会 进步 
或 者 止步 不 前 ， 人 口 的 忌 体 变化 ， 经 济 ， 政 治 面貌 ， 宗 教 信仰 等 的 发 
展 趋 势 以 及 历史 数据 感 兴趣 。Development Seed 组 织 和 美国 公共 广播 
电台 合作 ， 通 过 聚焦 西班牙 裔 的 人 口 增 长 以 及 他 们 选择 在 哪些 地 区 生 
活 ， 来 展示 美国 的 人 口 变化 情况 。 这 类 数据 在 政治 、 社 会 或 经 济 事件 
的 报道 中 很 重要 ， 它 们 可 以 提供 观点 支撑 以 及 事件 背景 。 


Development Seed 组 织 的 男 一 个 项 目 是 基于 美国 的 机 会 指数 创建 
的 互动 地 图 ， 它 展示 了 各 州 、 郡 在 不 同 指标 下 的 不 同 表现 ， 这 些 指标 
包括 失业 率 、 家 庭 收 入 、 高 速 网 络 订购 水 平 、 受 教育 水 平 、 志 愿 服务 
水 平 以 及 获取 健康 食物 的 便利 度 。 这 些 指标 最 终 可 以 用 于 帮助 人 们 选 
择 工 作 迁 大地， 并 长 励 政 府 或 企业 在 不 同 部 门 推行 改进 计划 。 


Development Seed 组 织 还 创建 了 一 个 气候 变化 地 图 ， 展 示 了 未 来 
的 全 球 温 度 和 降雨 量变 化 情况 。 当 将 这 些 预测 和 世界 银行 的 产业 类 型 
以 及 特定 区 域 的 人 均 收 入 数据 结合 起 来 时 ， 这 个 地 图 就 可 以 被 用 来 预 
测 气候 变化 相关 的 经 济 问 题 ， 包 括 类 似 洪水 这 样 的 目 然 灾害 ， 以 及 导 
致 作物 歉收 这 样 的 农业 气象 灾害 等 。 


当今 世界 ， 对 于 寻求 减轻 气候 变化 市 来 的 挛 重 后 条 的 活动 家 、 科 
学 家 以 及 政治 家 来 说 ， 当 地 图 和 其 他 与 气候 变化 相关 的 数据 来 源 结合 
在 一 起 的 时 候 ， 可 以 成 为 一 个 更 有 力 的 工具 。 而 在 一 些 气候 变化 会 市 
来 较 大 影响 的 地 区 ， 有 些 投资 人 看 到 了 新 的 商机 ， 也 可 以 利用 这 些 数 
据 。 比 如 ， 对 于 建造 堤坝 和 其 他 防洪 设施 的 建设 公司 来 说 ， 海 平面 上 
升 就 是 个 好 消息 。 然 而 ， 总 体 上 来 说 ， 这 些 地 图 和 数据 集 具 有 打破 国 
界 的 潜力 ， 可 以 被 用 来 促进 降低 温室 气体 的 排放 和 开发 对 气候 影响 较 
小 的 技术 。 


人 口 流动 数据 的 重要 意义 


尽管 人 口 普查 数据 、 世 界 银 行 以 及 其 他 政府 数据 集 ， 对 揭示 缓慢 
变化 的 社会 和 经 济 趋势 很 重要 ， 但 这 些 数 据 缺 乏 粒 度 和 时 效 性 。CDRs 
数据 可 以 填补 这 些 空 缺 。 因 为 CDRs 数 据 能 够 提供 粗略 的 移动 状态 和 一 
整个 国家 和 地 区 的 社交 网 络 ， 它 们 可 以 用 于 人 类 行为 的 建 模 ， 从 而 快 
速 识别 行为 变化 ， 并 且 预 测 未 来 的 行为 改变 。 使 用 CDRs 数 据 的 基础 研 
完 可 以 识别 人 们 在 现实 生活 中 ， 与 其 他 人 建立 联系 的 模式 以 及 他 们 出 
行 的 方式 ， 最 终 ，CDRs 数 据 的 相关 分 析 可 以 应 用 在 特定 的 场景 分 析 
中 。 例 如 ，CDRs 数 据 可 以 帮助 政府 部 门 更 好 地 了 人 解 贫民 罕 等 临时 居住 
地 的 动态 ， 以 促进 更 好 地 分 配 资 源 ; 还 可 以 用 于 预测 诸如 地 震 之 类 的 
自然 灾害 会 对 这 些 居 住地 产生 什么 样 的 影响 。 


2007 年 和 2008 年 ， 艾 伯 特 : 拉 斯 阁 ' 巴 拉巴 斯 和 他 的 同事 在 《 目 然 》 
杂志 上 发 表 的 两 篇 被 广泛 引用 的 论文 ， 束 是 天 于 CDRs 数 据 比较 有 影 啊 
力 的 早期 研究 。 这 两 篇 论文 阐释 了 CDRs 数 据 可 用 于 人 类 社交 网 络 以 及 
移动 性 动态 研究 的 潜力 。 


2007 年 的 项 目 使 用 了 未 公开 服务 商 提供 的 超过 40 亿 用 户 的 匿名 通 
话 记录 ， 来 研究 社交 网 络 的 进化 。 通 过 这 些 数据 ， 人 研究 人 员 人 研究 了 小 
规模 人 群 (朋友 圈 、 家 庭 、 专 业 圈子 ) 和 大 规模 人 群 (比如 学 校 、 机 
构 和 公司 这 类 人 口 组 成 相互 重合 的 社区 ) 一 段 时 间 内 的 不 同 动态 。 如 
果 在 给 定 的 时 间 段 中 ， 已 有 成 员 被 蔡 代 得 越 少 ， 那 么 小 规模 群体 束 越 
稳定 ， 而 大 规模 群体 反而 在 经 历 规模 和 构成 波动 的 情况 下 更 加 稳定 。 


2008 年 的 研究 关注 的 是 10 万 个 匿名 手机 用 户 的 移动 动态 。 以 前 ， 
人 类 的 移动 性 预测 一 般 用 列 维 飞行 Levy fight) 2) 和 随机 游 走 模型 
来 假设 一 个 人 活动 的 时 空 规律 。 从 CDRs 中 采集 的 位 置 数据 显示 ， 尽 管 
不 同 的 人 过 去 的 出 行 模式 不 同 ， 从 个 人 的 角度 来 说 ， 人 们 倾向 于 追寻 
简单 、 可 重复 的 移动 模式 。2010 年 ， 巴 拉巴 斯 和 他 的 同事 在 《科学 》 
杂志 刊登 了 一 篇 论文 表明 ， 即 便 出 行 的 频率 、 出 行 目的 地 不 同 ，93% 


的 人 的 出 行 是 可 以 被 预测 的 。 而 且 即 使 是 那 种 出 行 最 没有 规律 的 人 ， 
研究 者 通过 CDRs 数 据 模型 ， 至 少 可 以 预测 其 80% 的 出 行 。 


巴 拉 巴 斯 及 其 同事 的 研究 揭示 了 CDRs 数 据 集 的 巨大 潜能 。 当 应 用 
到 真实 生活 中 的 问题 时 ，CDRs 数 据 可 以 解释 清楚 用 其 他 方式 很 难 调研 
的 社会 、 环 境 ， 或 者 经 济 状 况 。 


全 世界 有 超过 10 亿 人 生活 在 20 万 个 从 民 宣 、 人 口 密集 且 肪 脏 的 人 肥 
困 区 域 、 破 败 失修 的 临时 住所 ， 以 及 其 他 非 正 式 的 居住 环境 中 。 这 些 
届 民 中 使 用 手机 的 有 数 亿 人 “。 因 此 ， 可 以 通过 手机 数据 来 掌握 这 些 居 
住 在 贫民 审 中 的 人 每 日 、 每 月 和 每 年 的 移动 模式 。 这 些 移动 模型 可 以 
帮助 确认 并 改善 现 有 的 贫民 窒 动 态 理论 。 比 如 ， 贫 民 窒 中 的 人 口 流动 
会 脏 样 影响 附近 的 城市 ? 是 什么 让 贫民 窒 中 的 人 口 增加 或 是 减少 ? 通 
过 这 些 问题 的 答案 ， 不 同 机 构 可 以 分 别 找 到 帮助 人 们 的 方法 ， 或 者 设 
计 有 效 的 诱导 机 制 帮助 人 们 找到 更 长 久 的 住所 。 
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人 员 发 现 了 人 们 进入 或 迁 出 基 贝 拉 的 迁移 模式 ， 这 让 他 们 可 以 推断 其 
居民 的 工作 的 地 点 和 部 落 的 从 属 关 系 。 一 个 惊人 的 发 现 是 : SRP 
的 居民 的 迁移 率 很 高 ， 接 近 一 半 的 居民 每 个 月 换 一 个 夜间 居住 地 点 。 
当 试 图 推 新 居民 的 新 居所 的 位 置 、 部 落 关 系 、 工 作 区 域 时 ， 人 研究 人 员 
发 现 每 个 月 的 此 类 信息 很 少 有 重合 的 时 候 。 人 研究 者 将 众人 在 昌 天 聚集 
的 一 些 地 方 一 一 很 可 能 是 他 们 的 工作 地 点 ， 称 为 “经 济 跳 板 ”， 并 且 长 
期 监测 这 些 地 点 。 


研究 人 员 认 为 ， 通 过 识别 这 些 经 济 聚 集 点 的 模式 ， 可 以 建立 贫民 
填 动 态 的 预测 模型 。 比 如 ， 可 以 预测 新 贫民 审 的 位 置 ， 或 是 一 个 贫民 
窟 是 怎样 发 展 起 来 的 ， 以 及 仙 民 罕 对 周边 城市 区 域 的 发 展会 产生 怎样 
的 影响 。 当 地 政府 可 以 分 配给 贫民 寓居 民用 于 保障 其 福利 的 ， 只 有 人 少 
量 的 宝贵 资源 。 对 贫民 割 将 会 如 何 随时 间 变 迁 有 更 好 的 了 解 ， 有 助 于 


城市 管理 者 确定 固定 基础 设施 投资 的 最 佳 位 置 ， 比 如 确定 哪里 适合 安 
装 下 一 条 净 水 管道 ， 或 是 哪里 适合 设置 一 个 新 的 公共 厕所 。 


除了 提供 针对 像 贫民 朝 这 样 长 期 问题 的 移动 模型 ，CDRs 数 据 还 可 
以 用 来 研究 如 何 采用 最 佳 方式 来 应 对 像 地 震 这 样 的 严重 灾难 。 伊 格 尔 
和 他 的 同事 分 析 了 2008 年 2 月 在 刚果 民主 共和 国 基 伍 湖区 域 发 生地 震 时 
通话 记录 中 的 变化 。 在 此 研究 中 ， 一 个 基线 活动 的 CDRs 数 据 变 化 被 用 
于 确定 地 震 发 生 的 时 间 以 及 震中 所 在 地 ， 并 找 出 反 第 通话 行为 持续 存 
在 的 区 域 ， 这 些 区 域 可 能 正 是 需要 援助 的 区 域 。CDRs 数 据 可 以 用 于 灾 
害 分 析 表 明 目 然 灾害 的 预测 性 分 析 可 能 可 以 依靠 现 有 的 电信 基础 设施 
来 进行 ， 这 使 人 们 制订 缓解 灾害 读 来 的 饥 莽 和 疾病 传播 的 事前 预案 成 
为 可 能 。 


2012 年 ， 在 撒哈拉 沙 六 以 南 的 非洲 大 陆 ， 闪 疾 导致 了 超过 100 万 名 
5 图 以 下 的 儿童 死亡 。 当 地 政府 和 健康 组 织 没有 成 功 抑制 该 疾病 的 一 个 
主要 原因 ， 是 没有 深入 了 解 窟 疾 感 染 者 是 如 何在 区 域内 医疗 不 足 的 非 
正式 社区 中 迁移 的 。 在 一 次 史无前例 的 数据 分 至 合作 中 ， 肯 尼 亚 卫 生 
部 、 当 地 移动 运营 丙 以 及 一 些 世界 最 知名 的 站 疾 专家 都 参与 其 中 ， 仇 
格 尔 和 他 的 合作 者 得 到 了 令 人 信服 的 证 据 ， 证 实 了 在 定量 分 析 症 原虫 
在 区 域 寄主 人 群 中 传播 时 ， 手 机 数据 是 最 准确 的 方法 。 


现在 ， 人 人 们 已 经 可 以 衡量 国家 层面 上 人 的 迁移 率 、 规 模 和 方向 。 
手机 数据 结合 详细 的 寄生 虫 风险 地 图 ， 让 研究 人 员 有 史 以 来 首次 可 以 
确定 一 个 给 定 区 域 招致 症 疾 的 风险 ， 从 根本 上 确定 窟 疾 发 生 的 热点 区 
域 。 发 现 想 疾 热 点 改变 了 窟 疾 防 控 资 源 在 整个 肯尼亚 的 分 配方 式 ， 政 
府 部 门 现 在 按照 新 的 战略 部 署 大 量 根 除 窟 疾 的 资源 ， 这 些 新 战略 相 较 
于 传统 战略 ， 包 售 了 对 人 们 的 真实 移动 模式 的 数据 分 析 结 有 末 。 研 究 人 
员 将 传染 性 疾病 包括 症 疾 的 专业 知识 与 手机 数据 相 结 合 ， 创 建 了 一 个 
成 功 追 中 和 预测 疾病 传播 的 痢 方 式 ， 使 得 资源 分 配 更 智慧 、 更 有 效 。 


让 广告 更 聪明 


当 多 数 人 想 通 过 谷歌 和 脸谱 网 做 宣传 时 ， 他 们 而 望 的 是 为 目 己 的 
公司 市 来 更 多 生意 。 但 在 推动 销售 外 ， 谷 歌 和 脸谱 网 的 广告 还 为 巨大 
的 数据 储量 打开 了 一 局 窗 一 一 提供 网 络 上 实时 的 观点 和 意见 快照 。 谷 
歌 的 AdSense 产 品 和 脸谱 网 广告 都 提供 了 某 广告 的 投放 用 户 衡量 数据 。 
因为 这 些 广告 跟 选 定 的 谷歌 关键 词 相 关联 ， 也 可 以 与 脸谱 网 的 基本 信 
思 和 兴趣 爱好 相关 联 ， 所 以 创建 这 些 广告 或 活动 的 人 可 以 获取 收 到 广 
告 的 人 们 的 (匿名 ) 数据 。 


假设 这 样 一 种 场景 : 你 创建 了 一 个 AdSense 的 活动 ， 其 关键 词 
为 “流感 "和 “生病 *。 然 后 随 着 时 间 的 推 黎 ， 你 可 以 看 到 关于 这 些 关 键 
词 的 指标 是 如 何 变化 的 ， 获 得 这 些 数据 的 途径 包括 搜索 或 得 看 Gmail 中 
的 邮件 。 比 如 ， 当 秋冬 季 市 流感 在 北半球 开始 又 发 的 时 候 ， 看 到 你 的 
广告 的 人 数 会 逐渐 上 升 。 通 过 查找 网 络 供应 商 数 据 ， 你 可 以 绘制 流感 
证 状 在 一 个 国家 内 的 传播 的 地 图 ， 找 到 热点 和 传播 模式 ， 甚 至 可 以 预 
测 下 次 骏 发 的 规模 、 地 点 或 者 其 他 动态。 


这 种 方式 的 流感 追踪 已 经 有 一 些 先例 。 风 臣 : 埃 森 巴 赫 在 
2004~2005 年 ， 于 加 拿 大 的 流感 季节 使 用 AdSense 人 退 味 流感 。 他 创建 了 
一 个 当 人 们 搜索 “流感 ”或 “流感 症状 * 的 时 候 会 出 现 的 广告 。 该 广告 的 
内 容 是 : “你 感冒 了 吗 ? 是 否 发 烧 、 胸 站、 虚弱 、 疼 痛 、 头 痛 、 咏 
嗽 ? ”， 并 链接 至 一 个 普通 的 医学 教育 网 站 。 他 发 现 这 个 方法 “ 比 起 传 
统 的 定点 医师 发 现 类 似 流感 疾病 并 上 报 的 方法 更 加 及 时 准确 ， 且 便宜 
得 多 一 -整个 流感 季节 仅 花 费 了 365.64 加 币 。” 


除了 可 以 追踪 一 个 国家 的 流感 传播 情况 (本 书 的 第 五 部 分 还 介绍 
了 全 球 疾病 追踪 咒 ， 比 如 谷歌 流感 趋势 ) ,AdSense 的 方法 还 可 以 用 于 
政治 分 析 或 其 他 需要 民意 测验 的 领域 。2012 年 的 选举 中 ， 一 个 广告 
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在 本 书写 作 时 ， 脸 谱 网 的 广告 系统 和 谷歌 还 有 所 不 同 ， 广 告 投放 
者 从 脸谱 网 获得 的 是 用 户 个 人 信息 的 一 些 特 定 部 分 。 根 据 脸谱 网 广告 
的 协议 条 款 ， 广 告 商 可 以 把 用 户 个 人 信息 中 的 特定 内 容 作 为 目标 ， 包 
括 地 理 位 置 (城市 、 州 、 省 或 国家 ) 、 基 本 信息 (年 龄 范围 、 性 别 、 
语言 、 婚 姻 状态 ) 、 爱 好 和 兴趣 、 受 教育 程度 以 及 职业 。 在 这 种 情况 
下 ,广告 商 并 不 能 获得 用 户 的 状态 更 新 或 评论 中 的 词汇 或 短语 。 田 
外 ， 他 们 也 不 能 获取 照片 的 相关 信息 ， 比 如 位 置信 息 、 活 动 内 容 等 。 
(需要 注意 的 是 ， 条 款 会 不 断 地 修改 。 脸 谱 网 的 移动 应 用 强调 了 图 片 
的 分 诗 功 能 ， 表 明了 脸谱 网 对 于 获取 移动 设备 招 摄 的 照片 有 很 大 兴 
趣 ， 这 些 照片 附带 了 丰富 的 元 数据 。) 


尽管 脸谱 网 对 广告 植 入 有 很 多 限制 ， 但 通过 它 ， 人 们 可 以 有 效 地 
获取 不 同人 群 中 的 特定 观点 。 例 如 ， 在 2012 年 选举 期 间 ， 你 可 以 设 定 
一 则 广告 ， 让 它 显 示 在 标记 了 “喜欢 米 特 : 罗 姆 尼 ” 或 在 兴趣 中 提 到 他 的 
名 字 并 且 受 过 高 等 教育 的 用 户 的 页 面 上 。 


到 目前 为 止 ， 对 于 匿名 挖掘 在 线 广告 的 衡量 数据 以 获得 接近 实时 
的 调查 对 和 象 的 观点 这 种 想法 ， 学 术 界 尚未 有 广泛 的 探索 。 但 这 个 方法 
被 证 明 可 以 让 个 人 有 效 、 及 时 、 便 定 地 获取 流行 观点 和 其 他 隐藏 在 合 
歌 和 脸谱 网 的 独占 数据 背后 的 要 素 。 


通过 推 文 识别 危机 


与 挖掘 脸 谱 网 和 谷歌 的 数据 山 所 需 的 曲折 方法 不 同 ， 推 等 的 开放 
生态 系统 让 数据 挖掘 更 加 直接 : 采集 推 文 ,过滤 并 分 析 有 关 压 力 、 危 
机 或 其 他 观点 的 指标 。2011 年 10 月 ， 联 合 国 秘书 长 办 公 厅 倡议 的 “全 球 


脉动 "项目 ， 出 版 了 对 印度 尼 西 亚 和 美国 的 推 文 进行 研究 的 结 采 。 其 目 
标 是 更 好 地 理解 公民 的 观点 ， 并 为 现 有 的 政策 研究 增加 筹码 。 


该 项 目 把 推 文 进行 分 类 ， 并 对 公民 关心 的 问题 进行 了 量化 分 析 。 
研究 人 员 关 注 的 主要 衡量 指标 包括 关于 有 茶 个 特定 话题 的 推 文 的 反 和 增 
加 或 减少 ， 比 如 停电 ; 推 等 对 话 主题 每 周 或 每 月 的 变化 趋势 ;， 某 个 竺 
定 话题 在 一 段 时 间 内 的 容量 特征 ;不 同 子 话题 的 比例 ， 比 如 非 正式 和 
正式 借款 ， 以 及 推 着 聊天 的 方式 和 其 他 不 同 来 产 的 数据 比较 。 


“全 球 脉动 ”项 目的 合作 方 Crimson Hexagon， 是 一 家 采集 和 分 析 公 
开 社 会 媒体 数据 的 公司 。 根 据 这 家 公司 的 分 析 ， 印 度 尼 西 亚 是 推 特 公 
司 的 全 球 第 四 大 市 场 ， 其 国民 每 天 发 布 55 亿 条 带 有 位 置 标签 的 推 文 。 
在 “全 球 脉动 ”项 目 中 ，Crimson Hexagon 公 司 获取 了 2010 年 7 月 到 2011 
年 10 月 所 有 公开 发 布 的 推 文 ， 通 过 使 用 哈佛 大 学 定量 社会 科学 研究 所 
开发 的 观点 分 析 运 算法 则 ， 来 分 析 文 本 中 的 关键 词 以 及 这 些 词 之 间 的 
关系 ， 研 究 人 员 可 以 了 解 引 起 话题 来 源 的 主题 类 型 和 相对 强度 ， 如 印 
度 尼 西亚 这 段 时 间 内 的 债务 、 食 物价 格 和 供应 量 以 及 燃料 等 问题 。 印 
度 尼 西亚 的 一 些 推 文 话题 被 用 来 与 美国 的 推荐 对 话 相 比较 ， 借 此 观察 
两 者 差异 。 


其 中 的 一 个 发 现 表 明 两 个 国家 有 关 燃 料 的 推 文 有 所 不 同 。 美 国 关 
于 燃料 的 推 文 主要 关心 的 是 价格 ， 而 印度 尼 西 亚 的 推 文 关注 的 则 是 是 
人 否 有 不 同类 型 的 燃料 ， 比 如 汽油 、 柴 油 、 石 油 和 煤油 。 这 个 区 别 意 味 
着 ， 进 一 步 的 研究 需要 区 分 燃料 话题 的 相关 了 于 话题 。 男 外 ， 人 研究 人 员 
发 现 印 度 尼 西亚 关于 粮食 价格 的 推 文 的 数量 与 通货 膨胀 统计 数据 密切 
相关 。 


研究 人 员 得 出 的 结论 表明 ， 数 据 和 文本 分 析 不 能 作为 衡量 一 个 人 
的 长 期 目标 和 关心 的 问题 的 标准 。 但 他 们 发 现 ， 推 特 数 据 作为 筛选 观 
点 的 一 个 总 体 方法 非常 有 用 ， 特 别 是 用 于 研究 一 个 国家 公民 当前 所 关 
心 的 间 题 。 


挖掘 金融 的 未 来 


里 然 对 于 一 个 研究 人 员 或 企业 家 来 说 ， 最 具有 挑战 的 可 能 是 去 获 
取 匿 名 金融 数据 的 大 数据 库 ， 但 这 些 数据 可 以 提供 关于 一 个 国家 的 经 
济 状 况 信息 ， 甚 至 还 可 以 预测 未 来 的 经 济 和 危机。 当然 ， 大 银行 拥有 并 
使 用 这 些 数 据 来 判断 客户 的 周转 率 ， 决 定 哪些 人 可 以 货款、 哪些 人 有 具 
有 民 好 信用 以 及 使 用 什么 样 的 利率 。 


但 如 果 这 类 数据 可 以 更 广泛 地 供 大 银行 以 外 的 研究 人 员 或 企业 使 
用 ， 对 于 所 有 规模 的 行为 经 济 都 将 是 有 利 的 。 麻 省 理工 学 院 的 凯瑟琳 
Rew (第 七 章 也 讨论 过 ) 的 工作 可 以 让 我 们 了 解 一 些 这 种 可 能 性 。 
2008 年 ， 克 和 鲁 姆 获得 权限 接 入 美国 银行 的 一 个 匿名 数据 库 ， 其 中 含有 8 
000 万 客户 的 金融 数据 。 她 的 分 析 主 要 十 关 于 这 些 客户 的 购买 模式 。 殉 
鲁 姆 发 现 ， 经 常 把 钱 花 在 杂货 店 和 和 餐馆 的 人 们 的 行为 最 容易 预测 ， 而 
那些 把 钱 花 在 加 油 站 和 快餐 连锁 店 的 人 不 易 预 测 。 她 还 发 现在 一 次 购 
物 出 行 中 ， 富 有 的 人 倾向 于 在 不 同 的 商店 消费 ， 而 那些 不 那么 富有 的 
人 ， 在 一 次 购买 行为 中 基本 上 只 去 一 家 商店 。 


这 类 分 析 只 是 冰山 一 角 。 当 银行 数据 和 其 他 类 型 的 数据 结合 起 
来 ， 比 如 地 理 数据 和 人 口 普查 数据 ， 人 们 可 以 在 一 个 空前 规模 上 对 国 
家 的 经 济 版 图 进行 描绘 。 比 如 ， 人 们 可 以 预测 工作 岗位 的 增长 和 下 
降 ， 或 者 将 消费 模式 与 消费 信心 指数 连接 在 一 起 。 后 者 可 以 提供 最 新 
的 即时 消费 信心 指数 。 这 些 数据 可 以 用 于 预测 哪些 产业 会 受到 经 济 腾 
退 的 影响 ， 还 可 能 预测 它们 受 影 响 的 程度 。 大 数据 驱动 的 指标 可 以 帮 
助 企 业 和 政府 做 出 可 能 缓和 将 发 生 的 经 济 危 机 的 决定 。 


个 人 金融 初创 企业 Mint 创 办 于 2006 年 ， 已 拥有 数 百 万 的 最 新 金融 
交易 信息 。 该 公司 为 用 户 提供 简单 易 用 的 界面 ， 让 用 户 可 以 通过 手机 
应 用 程序 或 电脑 网 页 浏览 目 己 所 有 的 金融 账户 信息 。 除 了 向 用 户 提供 
他 们 的 基本 金融 信息 ，Mint 还 提供 理财 建议 ， 比 如 说 ， 根 据 用 户 需 求 


推 戎 信用 卡 或 储蓄 账户 。2009 年 ， 兽 开发 了 广 受 欢迎 的 个 人 金融 软件 
Quicken 的 Intuit 公 司 收购 Mint 的 时 候 ， 也 同时 购买 了 所 有 Mint 的 客户 数 
据 。 


现在 ，Mint 的 主要 业务 是 向 客户 提供 他 们 的 消费 和 储蓄 信息 ， 并 
推 师 他 们 未 来 的 习惯 以 便 向 客户 推荐 信用 卡 、 健 康 保险 、 旅 行 等 的 最 
佳 促销 活动 。2010 年 ，Mint 公 司 启 用 了 一 个 可 视 化 工具 
MintData， 它 可 以 让 人 们 查看 所 有 Mint 用 户 的 匿名 总 消费 信息 。 例 
如 ， 人 们 可 以 看 到 大 家 在 俄 克 拉 何 马 州 的 餐馆 与 在 华盛顿 的 餐馆 平均 
消费 水 平 的 比较 。MintData 项 目 已 经 被 终止 了 ， 但 在 2013 年 本 书写 作 
期 间 ，Mint 公 司 已 经 计划 开发 一 个 相似 的 可 视 化 工具 。 


如 果 Mint 的 百 万 客户 的 匿名 金融 数据 都 公开 的 话 ， 那 么 除了 一 部 
分 mntuit 公 司 的 研究 人 员 和 与 该 公司 合作 的 经 济 学 家 之 外 ， 会 有 更 多 的 
人 可 以 对 这 些 数 据 进 行 研 究 。 发现 金融 数据 中 的 趋势 ， 可 以 帮助 预测 
经 济 危 机 ， 也 可 以 帮助 建立 基于 数据 的 改善 经 济 指南 。 将 金融 数据 和 
其 他 数据 集 配 对 起 来 ， 甚 至 可 以 通过 回答 一 些 简 单 问题 ， 比 如 在 哪个 
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这 些 都 还 是 金融 数据 分 析 的 初步 应 用 ， 但 拥有 获取 这 种 类 型 的 数据 对 
人 们 来 说 已 经 很 令 人 激动 了 。 


国家 层面 的 数据 有 很 多 种 使 用 方式 ， 其 中 的 一 些 对 政策 具有 很 重 
要 的 意义 。 数 据 可 视 化 提供 了 一 种 令 人 信服 的 直观 方式 来 讲述 数据 青 
后 的 故事 。 当 通过 这 些 可 视 化 的 图 表 、 动 画 或 是 互动 数据 工具 可 以 很 
容易 地 发 现 数据 的 变化 趋势 时 ， 政 策 制定 者 们 束 不 容易 忽视 可 能 发 生 
的 危机 。 数 据 可 视 化 或 其 他 信息 分 析 工 具 总 是 希望 能 获得 最 新 的 数 
据 ， 而 这 正 是 CDRs 数 据 可 以 发 挥 作用 之 处 。 除 了 提供 高 密度 的 大 众 移 
动 信息 ，CDRs 数 据 还 可 以 提供 几乎 实时 的 信息 ， 从 而 帮助 相关 人 员 尽 
可 能 快速 和 有 效 地 处 理 自 然 灾 害 等 危机 。 


为 了 获得 对 国家 层面 的 感知 ， 你 可 以 从 我 们 这 个 时 代 的 网 络 巨头 
公司 获得 该 层面 的 数据 。 你 可 以 通过 接 入 谷歌 和 脸谱 网 的 广告 服务 网 
络 ， 发 布 广告 并 分 析 挖 握 其 结 末 指标 数据 。 推 竺 具有 大 量 的 公共 可 获 
得 数据 ， 同 样 也 可 提供 丰富 的 大 众 观点 。 通 过 语句 文本 解析 算法 ， 可 
以 从 推 特 每 天 亿 万 条 140 个 字符 以 内 的 海量 内 容 中 抽取 多 样 化 的 信息 。 
然而 ， 所 有 这 些 方式 部 是 为 了 确保 你 提出 了 正确 的 问题 并 验证 你 的 发 
现 。 第 九 章 将 涉及 一 种 重要 的 双 校 验 机 制 ， RE SA AE 
的 全 球 链 中 。 


1. 列 维 飞行 ， 根 据 法 国 数学 家 保罗 ` 列 维 命名 ， 是 一 种 随机 游 走 模型 。 译 者 注 


: ”很 多 趋势 可 以 通过 对 搜索 词 的 流行 程度 、 频 率 和 周期 性 等 进行 ; 
: 调查 来 获得 。 谷 歌 提 供 了 一 个 名 为 “谷歌 公共 数据 管理 器 ”的 工具 ， 
; 使 用 世界 银行 以 及 其 他 数据 集 ， 让 人 们 对 一 段 时 间 内 不 同 的 统计 数 ; 
; 据 进 行 比较 。Data.gov 网 站 链接 了 很 多 美国 政府 和 非 政 府 组 织 的 可 ; 
; 视 化 数据 ， 并 常 将 这 些 数据 在 地 图 上 进行 到 加 。 


REALITY 
MINING 
Using Big Data 


to engineer a Better World 


第 九 章 
大 数据 能 为 世界 带 来 什么 ? 


现实 挖 气 影 响 深远 的 应 用 之 一 古 预 测 疾病 和 追 踩 传 染病 。 在 当今 
的 全 球 化 世界 ， 致 命 疾病 会 灾难 性 的 传播 至 空前 多 的 人 口 。 本 书 的 最 
后 这 个 部 分 介绍 了 全 球 层 面 的 数据 ， 并 着 眼 于 更 好 地 了 解 疾病 是 如 何 
在 我 们 这 个 大 规模 连接 的 世界 中 传播 的 。 由 于 数据 集 可 以 告诉 我 们 人 
们 是 如 何 迁 移 、 他 们 在 网 络 上 搜索 什么 以 及 他 们 的 感受 ， 因 此 我 们 有 
机 会 创造 了 一 个 基于 信息 的 概念 来 说 明 世 界 是 如 何 运 转 的 。 


正如 世界 各 国共 同 参与 协调 人 口 研 究 一 样 ， 世 界 银行 、 联 合 国 以 
及 其 他 国际 机 构 已 经 局 动 并 持续 采集 跨国 数据 。“ 千 年 发 展 目 标 ” 提 出 
了 一 系列 到 2015 年 应 实现 的 8 个 目标 ， 包 括 使 极端 贫穷 和 饥 俄 人 口 减 
半 、 控 制 艾 涕 病毒 / 文 滋 病 的 传播 等 。 在 这 些 目 标的 激励 下 这 些 国际 


组 织 建立 了 国家 内 以 及 国家 间 的 标准 化 协调 采集 数据 计划 和 指导 
针 ， 并 局 动 了 国际 数据 采集 行动 。 


当然 ， 正 如 在 第 四 部 分 中 讨论 的 天 于 国家 数据 普查 一 样 ， 全 球 数 
据 普 碍 也 是 静态 的 。 因 此 ， 在 对 疾病 扩散 进行 建 模 时 ， 一 个 重要 的 步 
又 是 量化 人 口 的 迁移 ， 同 时 ， 我 们 还 必须 关注 网 络 数据 集 ， 比 如 航 罕 
旅行 和 远洋 航线 。 每 年 有 上 亿 乘 客 乘坐 飞机 ， 每 个 乘客 部 有 可 能 把 疾 
病 融 到 新 的 人 群 中 ， 而 且 尽 管 海运 并 不 会 有 航空 乘客 那么 多 ， 但 海运 
的 食品 和 货物 在 不 知 不 觉 中 也 可 能 含有 入 侵 物 种 ， 比 如 有 问题 的 病 
毒 、 细 菌 或 寄生 虫 。 


在 全 球 层面 上 ， 最 有 吸引 力 的 数据 来 源 古 互联 网 搜索 查询 ， 它 为 
研究 人 类 行为 和 环境 情况 提供 了 一 局 窗户 。 合 歌 的 匿名 搜索 词 数 据 库 
是 该 层面 最 强大 的 数据 来 源 之 一 (一 个 复 洒 的 事实 和 需要 关注 的 问题 
是 政府 是 否 会 非法 获取 这 些 数 据 ) ， 该 数据 库 在 用 户 没有 登录 上 自己 的 
谷歌 账户 的 状态 下 不 会 识别 特定 的 个 人 ， 而 是 通过 互联 网 供应 商 的 地 
址 来 识别 该 用 户 。 合 歌 目 己 在 一 些 有 用 的 工具 中 使 用 并 公布 了 部 分 数 
据 ， 比 如 谷歌 流感 妃 踪 系统 和 谷歌 搜索 解析 。 这 些 工 具 表明 ， 任 何人 
都 可 以 将 一 段 时 间 内 的 搜索 词 的 受 欢迎 程度 可 视 化 ， 并 下 载 有 用 的 数 
据 以 便 进一步 研究 。 


推 特 也 可 以 用 于 全 球 层面 。 本 章 中 我 们 讨论 了 一 些 接 入 推 翌 的 fire 
hose 数 据 接 口 的 不 同方 法 ， 该 数据 接口 每 天 产生 成 干 上 万 的 推 文 。 


但 是 ， 通 过 这 些 全 球 数据 ， 有 可 能 会 导致 草率 判断 现实 状况 。 在 
大 规模 数据 上 建立 的 模型 分 机 ， 应 该 尽 可 能 经 通过 个 体 经 验 来 证 
实 ， 为 自 上 而 下 的 判断 提供 目下 而 上 的 经 验 检验 。 为 此 ， 国 际 化 的 初 
创 企业 Jana 开 发 了 一 个 手机 装置 来 采集 广泛 观点 。 该 公司 在 全 球 超 过 
100 个 国家 中 ， 为 手机 用 户 提 供 赚 取 少 量 通话 时 间 的 机 会 。 一 种 常用 的 
方法 是 让 人 们 通过 完成 手机 问卷 来 赚 取 通话 时 间 ， 这 种 问卷 可 以 包括 
非常 广 沁 的 话题 ， 人 简单 的 问题 比如 某 种 特定 的 产品 在 当地 商店 中 古人 否 


有 售 ? 管 题 者 最 近 是 否 有 类 似 流感 的 症状 ? 这 类 目 陈 式 调查 数据 提供 
了 一 个 重要 的 、 非 侵略 性 的 方法 ， 可 以 用 来 验证 由 人 口 层面 数据 而 产 
生 的 推断 分 析 。 


本 章 人 简单 介绍 了 全 球 层面 数据 采集 的 不 同方 法 ， 并 着眼 于 大 数据 
最 吸引 人 的 应 用 之 一 : 追 踩 、 预 测 乃 至 请 除 流 行 疾病 。 


ERRATA SE 


像 世 界 银行 、 联 合 国 统计 委员 会 、 经 济 合作 与 发 展 组 织 以 及 国际 
货币 基金 组 织 这 样 的 国际 组 织 已 经 积极 地 确保 所 采集 的 关于 参与 国 的 
数据 达到 一 定 的 标准 。 据 此 ， 它 们 共同 合作 为 统计 工作 开发 合适 的 框 
架 以 及 最 佳 实践 政策 ， 并 在 追踪 记录 数据 交换 过 程 和 方法 的 指标 上 达 
成 了 共识 。 世 界 银 行 在 这 些 最 佳 实践 的 约束 下 ， 根 据 来 自 不 同 国家 统 
计 系 统 的 数据 来 汇编 国际 数据 集 。 另 外 ， 它 还 资助 在 全 球 采集 数据 的 
项 目 ， 比 如 MAPS 计 划 〈 马 拉 喀 什 数据 统计 行动 计划 ) 以 及 PARIS21 联 
BB (21 世 纪 发 展 统 计 伙 伴 联盟 ) 。 


MAPS 计 划 共 包括 6 个 行动 ， 旨 在 改善 国际 和 国家 统计 系统 。 
在 “千年 发 展 目 标 ” 的 驱动 下 ，MAPS 计 划 包 括 三 个 专门 关注 全 球 层面 
数据 采集 的 行动 : 一 是 为 所 有 低 收 入 国家 规划 统计 系统 并 规划 国家 统 
计 发 展 战略 ， 直 到 2006 年 ， 二 是 保证 所 有 发 展 中 国家 参与 2010 年 的 人 
口 普查 ; 三 是 设立 国际 家 庭 调查 网 络 ， 用 于 采集 以 家 庭 为 单位 的 全 球 
社会 经 济 数据 。 


PARIS21 联 盟 则 是 一 个 决策 者 和 分 析 师 之 间 的 国际 合作 。 该 论坛 
成 立 于 1999 和 年， 促进、 影响 并 帮助 了 很 多 国家 通过 最 有 效 和 最 有 用 的 
方法 使 用 统计 数据 。 它 帮助 “ 低 收 入 和 中 低 收入 国家 设计 、 执 行 并 监管 
国家 层面 的 统计 发 展 战 略 盖 一 其 本 质 上 就 是 建立 统一 数据 采集 标准 的 


一 种 方法 ,“ 并 让 国家 拥有 和 生产 所 有 千年 发 展 目标 所 要 求 的 指标 数 
据 ”。 


得 丰 于 世界 范围 内 不 同 组 织 的 协同 努力 ， 跨 国 数据 和 全 球 人 口 普 
查 数据 在 符合 合理 预期 标准 和 连贯 性 的 情况 下 ， 现 在 已 经 可 以 被 获 
取 。 特 别 是 那些 可 以 通过 世界 银行 、 经 济 合 作 与 发 展 组 织 以 及 国际 货 
币 基金 组 织 的 网 站 在 线 获 取 的 数据 ， 可 以 让 人 对 全 球 整 体 经 济 状 况 有 
个 准确 而 快速 地 了 解 。 


航运 和 航海 的 足迹 


也 许 没有 比 国内 和 国际 航空 航线 ， 更 能 够 在 全 球 层面 上 代表 人 类 
流动 的 途径 了 。2011 年 的 美国 ， 共 有 7.3 亿 乘客 乘坐 商用 飞机 出 行 。 同 
年 ， 全 球 飞机 共 运 输 了 28 亿 乘客 。 人 们 从 A 地 点 到 B 地 点 的 路 线 选择 可 
以 和 人 口 普查 数据 、 疾 病 地 图 以 及 其 他 数据 集 交 广 验 证 ， 用 于 了 解 信 
轧 、 交 易 和 疾病 的 传播 。 


这 些 流 动 路 径 数据 的 一 个 主要 来 源 是 国际 航空 运输 协会 ， 它 们 运 
营 的 数据 库 采集 了 2000 年 以 来 的 国内 和 国际 航线 的 信息 。 该 数据 库 的 
信息 来 自 130 多 家 航空 公司 ， 可 以 履 盖 全 球 每 月 约 90% 的 飞行 计划 。 这 
些 数据 可 以 在 国际 航空 运输 协会 的 网 站 上 下 载 ， 订 阅 12 个 月 的 数据 大 
约 要 花费 1 000 美 元 。 在 2006 年 ， 美 国 国家 科学 院 院 刊 的 一 篇 论文 中 ， 
维多利亚 :- 科 利 扎 和 她 的 同事 们 使 用 了 国际 航空 运输 协会 数据 库 中 2002 
年 的 数据 ， 包 括 由 直达 航班 连接 的 成 对 机 场 以 及 任意 指定 航线 的 剩余 
座位 。 他 们 的 研究 成 果 形 成 了 一 个 包含 3 880 个 端点 (机 场 ) 以 及 18 
810 条 连 线 (在 机 场 之 间 流 动 的 乘客 ) 的 网 络 ， 人 研究 人 员 利 用 这 个 网 络 
建立 了 全 球 疾病 传播 模型 。 


另 一 个 航空 乘客 数据 的 来 源 是 UBM Aviation 公司 ， 它 们 出 售 有 关 
全 球 航 空 业 的 数据 、 分 析 和 咨询 服务 。 截 至 2012 年 7 月 ，UBM Aviation 
的 数据 公司 OAG 的 数据 库 包 括 超过 900 条 的 航线 以 及 超过 4 000 个 的 机 
场 ， 该 公司 同时 提供 1979 年 以 来 的 历史 航班 信息 时 间 表 。OAG 记 采 的 
航线 报告 内 容 包 括 某 次 航班 共有 多 少 个 座位 ， 以 及 该 航班 的 出 发 城市 
和 目标 城市 。 很 多 研究 人 员 曾 经 使 用 OAG 数 据 库 来 预 估 疾 病 传播 。 这 
些 数据 库 可 以 在 OAG 的 网 站 上 购买 ， 价 格 由 不 同 的 国家 、 数 据 类 型 以 
及 订阅 模式 决定 ， 比 如 在 美国 ，“OAG 全 球 飞行 指南 ”一 年 的 订阅 价格 
为 845 美 元 。 


除了 航空 以 外 ， 货 船 也 提供 了 一 些 研 究 人 类 移动 性 的 切入 点 。 唱 
然 海 运 运输 的 主要 是 货物 而 非 乘客 (货物 运输 占据 世界 交易 的 
90%) ,但 航运 网 络 仍然 在 物种 入 侵 和 疾病 传播 中 扮演 着 重要 的 角 
色 。 


2001 年 ， 船 舶 和 港口 开始 使 用 自动 识别 系统 (简称 AIS) 设备 ， 
从 而 自动 将 海上 交通 的 来 往 航 线 电子 化 。 尽 管 自动 识别 系统 主要 用 于 
防止 碰撞 和 提高 港口 的 安全 性 ， 该 系统 的 附带 用 途 是 可 以 用 来 建立 一 
个 庞大 的 航运 网 络 数据 库 。 海 详 网 络 数据 库 是 一 个 关于 航海 统计 的 在 
线 记 录 ， 其 内 容 包 括 船 舶 的 到 达 和 出 发 数据 ， 订 阅 价 格 在 630~1 4000 
美元 不 等 (取决 于 度量 标准 以 及 用 户 人 数 ) ° BAS REIL RY 
同事 通过 这 个 数据 库 获 得 了 2007 年 的 历史 自动 识别 系统 数据 ， 并 借 此 
追踪 了 超过 16 000 艘 船舶 以 及 近 千 个 港口 ， 连 接 了 超过 36 351 对 有 直接 
航线 的 港口 。 基 于 2007 年 主要 货船 的 行程 ， 研 究 人 员 发 现 了 在 干 散 货 
运输 、 和 集装箱 货运 以 及 油 钢 运输 之 间 出 现 的 三 种 截然 不 同 的 运输 模 
式 。 比 如 ， 集 装 箱 货运 遵循 有 规律 的 重复 航线 ， 而 干 散 货 运输 和 有 关 
运输 在 港口 之 间 的 运输 则 相对 较 难 被 预测 。 


根据 采集 了 谷歌 官方 历史 数据 和 Comscore 数 据 的 Statistic Brain 
司 提供 的 信息 ， 搜 索 巨 头 谷 歌 平 均 每 天 收 到 47 亿 次 网 页 查询 ， 仅 2011 
年 一 年 丈 有 1.7 万 亿 次 搜索 。 这 些 搜索 是 了 解 人 们 的 兴趣 以 及 所 处 状况 
的 线索 。 该 公司 甚至 将 流感 暴发 和 搜索 词 频率 联系 起 来 (第 十 章 中 会 
进一步 解释 ) 。 同 样 的 ， 很 多 其 他 趋势 可 以 通过 对 搜索 词 的 流行 程 
度 、 频 率 和 周期 性 等 进行 调查 来 获得 。 


谷歌 提供 了 一 个 名 为 “趋势 ”的 免费 公共 工具 ， 让 任何 搜索 网 页 搜 
索 的 人 都 可 以 看 到 搜索 随时 间 的 变化 。 该 工具 使 用 来 目 上 亿 匿 名 用 户 
的 搜索 查询 数据 ， 而 且 只 要 用 户 登 录 上 自己 的 谷歌 账户 ， 就 可 以 下 载 。 


什 交 网 络 的 全 球 数 据 


针对 全 球 层面 在 线 数据 的 讨论 是 无 法 避 开 推荐 和 脸谱 网 的 。 正 如 
在 第 七 章 和 第 八 章 中 提 到 的 ， 推 着 拥有 一 个 名 为 fire hose 的 数据 接口 ， 
让 俩 究 人 员 和 企业 可 以 获取 绝 大 多 数 的 推 文 。 已 经 有 大 量 的 书 讨 论 如 
何 让 推 敌 数据 有 意义 。 本 书 中 ， 我 们 提供 了 一 些 在 进行 定制 分 析 时 很 
有 用 的 数据 来 源 选 项 。 


2012 年 中 期 ， 推 特 宣称 其 全 球 超 过 1.4 亿 用 户 每 天 发 布 的 推 文 超过 
了 4 亿 条 。2012 年 8 月 ， 推 特 发 布 了 他 们 的 认证 合作 项 目 ， 特 别提 到 了 
DataSift、Gnip、Topsy 等 12 个 合作 伙伴 公司 。 每 个 公司 都 有 不 同 的 目 
标 和 方法 ， 但 都 可 以 深入 获取 推 特 数据 以 及 关于 数据 的 深入 了 解 。 这 
些 公司 反 过 来 用 不 同 的 方法 分 析 数 据 ， 然 后 将 预 分 类 过 的 数据 集 和 服 
务 提 供给 其 他 公司 或 个 人 ， 这 些 公司 或 个 人 往往 对 通过 推 特 表达 的 不 
同 观点 有 兴趣 。 如 果 想 要 找到 关于 2012 年 总 统 选举 的 推 文 和 对 话 ， 
DataSift 公 司 可 以 使 用 自然 语言 处 理 以 及 其 他 过 滤 条 件 来 采集 和 整理 这 
些 推 文 ， 并 提供 每 月 3 000~15 000 美 元 价格 不 等 的 产品 ， 这 取决 于 收 到 
数据 的 单位 和 所 提供 的 服务 。 
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程序 编程 接口 来 进行 现实 控 气 。 而 据 推 翌 公 司 的 说 法 ， 这 些 应 用 程序 
编程 接口 也 在 不 断 地 更 新 。 一 个 可 用 的 应 用 程序 编程 接口 是 用 来 查询 
推 竺 内 容 的 ， 比 如 关键 词 、 涉 及 特定 用 户 的 推 文 或 是 来 目 某 个 特定 用 
尸 的 推 文 。 不 过 ， 这 个 应 用 程序 编程 接口 有 局 限 性 。 它 不 是 一 个 推 文 
的 完整 索引 : 它 不 能 搜索 一 个 星期 以 前 的 推 文 ， 而 且 搜 索 词 在 复杂 性 
上 受 限 。 推 敌 的 流 式 应 用 程序 编程 接口 比 搜索 应 用 程序 编程 接口 好 
用 ， 比 如 ， 人 允许 退 味 更 多 的 关键 词 ， 搜 集 市 有 特定 区 域 地 理 标 记 的 推 
文 。 所 有 推 文 在 一 定 的 比例 限制 下 的 随机 抽样 片段 ， 束 是 通过 这 个 应 
用 程序 编程 接口 抽取 出 来 的 。 


正如 第 七 章 中 提 到 的 ， 获 取 脸 谱 网 数据 的 途径 之 一 是 广告 分 析 ， 
但 还 有 男 一 种 方法 是 通过 该 公司 为 开发 人 员 设 计 的 开放 图 表 工 具 。 
2010 年 ， 该 公司 提供 开放 图 谱 协 议 ， 回 大 众 提供 了 用 户 社 交 图 谐 中 公 
开 的 部 分 ， 包 括 好 友 、 照 片 、 活 动 和 页 面 。 社 交 图 谱 中 的 每 个 对 象 都 
有 唯一 的 DD， 并 且 可 以 通过 图 谱 应 用 程序 编程 接口 调用 ID。 图谱 应 用 
程序 编程 接口 的 标准 版 本 只 允许 用 户 在 每 次 查询 时 检索 一 条 信息 ， 批 
处 理工 具 让 用 户 一 次 可 以 发 起 多 达 50 次 的 查询 。 社 交 网 络 上 的 流行 应 
用 程序 的 开发 者 ， 在 用 户 授权 该 应 用 获取 数据 的 情况 下 ， 可 以 通过 连 
续 的 批 处 理 快速 地 检索 数 百 万 脸谱 网 用 户 数据 。 


脸谱 网 和 推 敌 都 是 正在 发 展 中 的 公司 ， 它 们 都 在 改变 获取 一 定数 
量 或 类 型 数据 的 方法 。 关 于 全 球 层面 上 人 们 的 思考 、 移 动 以 及 行为 ， 
这 两 家 公司 都 癌 研 究 人 员 提 供 并 且 将 持续 提供 新 观点 ， 因 此 它们 也 十 
现实 挖掘 所 需 数据 的 重要 来 源 。 


现实 挖掘 的 实际 核查 


通过 大 量 数 据 对 世界 进行 目 上 而 下 的 、 上 帝 视 角 的 观察 ， 可 以 使 
人 们 获得 前 所 未 有 的 了 解 世界 各 个 角落 出 现 的 趋势 的 途径 。 但 如 采 从 
全 世界 千 万 亿 字 节 级 别 的 数据 中 得 出 的 结论 没有 复核 机 制 ， 那 么 从 这 
些 数 据 中 建立 的 模型 可 能 没 法 像 人 们 项 望 的 那么 有 价值 。 手 机 除了 在 
这 个 层面 上 通过 CDRs 数 据 提供 对 于 人 们 的 移动 性 的 观察 ( 见 第 四 部 
分 ) ， 还 可 以 作为 个 人 状况 和 环境 的 有 效 核查 工具 。 
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乱 暴发 的 研究 。2009 年 ， 内 和 森 ' 伊 格 尔 在 卢旺达 与 公共 健康 社区 以 及 当 
地 电信 公司 合作 ， 试 图 证 明 从 CDRs 数 据 中 得 到 的 人 们 的 活动 情况 能 够 
预测 疾病 的 暴发 。 人 研究 人 员 相 信 ， 如 果 疾 病 将 要 暴发 ， 一 个 主要 的 表 
现 是 在 被 感染 的 社区 中 的 人 口 活 动 会 减少 。 他 们 怀疑 人 口 活动 的 减少 
征 由 类 似 流感 的 征 状 导致 的 ， 而 且 似乎 是 预示 一 周 后 霍乱 对 发 的 最 初 
信和 号。 


然而 ， 这 些 社区 中 活动 的 减少 被 证 明 并 不 是 因为 人 们 受到 类 似 流 
感 症状 的 困扰 ， 而 是 由 于 骏 雨 冲 毁 了 道路 。 模 型 发 现 活 动 减少 是 因为 
洪水 而 不 征 因为 霍乱 。 尽 管 洪水 是 霍乱 桶 发 的 先兆 ， 但 活动 的 减少 被 
证 明 与 流感 钙 状 的 困扰 无 关 。 但 仅 从 全 球 的 视角 来 看 ， 人 口 流动 性 低 
与 疾病 之 间 的 关联 度 比 起 与 基础 设施 问题 之 间 的 联系 要 更 为 突出 。 


得 益 于 伊 格 尔 和 全 球 移动 运营 商 之 间 的 民 好 关系 ， 他 在 2009 年 成 
立 了 Jana 公 司 (前 身 为 txteagle) ， 该 公司 让 国际 品牌 可 以 方便 地 通过 
手机 与 人 们 打交道 。 到 2013 年 中 期 ，Jana 公 司 在 全 球 已 有 35 亿 订阅 用 
尸 。Jana 的 主要 目标 之 一 是 采集 消费 者 对 于 新 兴 市 场 的 观点 ， 在 这 个 
领域 传统 的 市 场 调研 往往 不 够 有 用 或 高 效 。Jana 公 司 提供 激励 措施 以 
吸引 人 人 们 加 入 人 研究 小 组 ， 提 供 他 们 的 观点 和 意见 的 用 户 可 以 换取 和 额外 
的 通话 时 间 。 该 公司 正在 建立 一 个 目 助 界 面 ， 让 研究 人 员 可 以 同 超 过 
100 个 国家 的 手机 订阅 者 发 送 定制 的 调查 问卷 。 通 过 这 种 方式 ，Jana 提 


供 了 一 种 直接 从 35 亿 手机 订阅 者 的 样本 中 获取 观点 的 方法 ， 为 全 球 的 
大 数据 分 析 现 实 核查 提供 了 入 口 。 


有 史 以 来 ， 人 类 第 一 次 拥有 在 全 球 层面 看 到 自身 行为 的 能 力 。 不 
同 的 人 口 普 查 、 出 行 和 航行 网 络 、 基 于 网 页 的 搜索 、 社 交 网 络 行为 ， 
以 及 手机 的 使 用 正在 这 种 能 力 中 扮演 着 重要 的 角色 。 出 现 这 些 变 化 和 
发 展 ， 一 部 分 原因 是 人 与 人 之 间 的 现实 连接 和 数字 连接 都 大 大 地 增多 
了 ， 这 也 导致 了 疾病 传播 的 速度 变 快 和 范围 变 大 。 下 一 章 将 会 深入 探 
讨 关 于 流行 病 追 踩 、 建 模 和 预测 领域 中 的 一 些 可 能 的 应 用 。 


第 十 章 
明天 会 更 好 


当今 世界 被 数据 和 覆盖 ， 从 飞行 网 络 到 通话 数据 记录 以 及 网 络 搜索 
和 脸谱 网 状态 更 新 。 在 全 球 层面 建立 一 个 系统 的 方法 来 改善 全 球 健康 
状况 也 许 是 大 数据 最 有 价值 的 一 个 应 用 。 作 为 本 书 的 最 后 一 革 ， 本 革 
专门 探讨 使 用 全 球 数据 来 识别 以 及 阻止 传染 病 传播 的 方法 ， 这 些 传染 
性 疾病 包括 流行 性 感冒 、 汇 疾 等 。 通 过 前 述 章 下 中 提 到 的 数据 ， 我 们 
来 看 一 下 可 以 用 它们 建立 特定 疾病 在 全 球 传 播 模 型 的 各 种 方法 。 


疾病 通过 人 、 昆 虫 以 及 其 他 载体 传播 。 为 了 了 解 疾 病 是 如 何 传播 
的 ， 将 载体 的 移动 状况 进行 定量 很 重要 。 一 种 采集 移动 状态 信息 的 方 
法 是 使 用 航空 和 海运 路 线 上 的 数据 。 在 上 一 章 中 已 经 介绍 过 ， 这 种 粗 
略 地 衡量 移动 性 的 方法 ， 被 证 实 是 改善 疾病 传播 现 有 模型 的 一 个 重要 
方法 。 本 章 关 注 能 够 使 航空 和 航海 数据 更 精确 的 方法 ， 以 便 得 出 关于 
一 些 特 定 全 球 疾 病 载体 的 更 精确 的 观点 ， 比 如 产 重 的 急性 呼吸 综合 
征 。 


模型 不 仅仅 可 以 通过 加 入 飞机 和 船舶 的 移动 来 进一步 改善 ， 还 可 
以 加 入 个 人 选择 的 不 同 路 径 。 全 球 有 超过 65 亿 活跃 手机 订阅 ，CDRs 数 
据 可 以 为 传统 流行 病 学 家 的 模型 市 来 巨大 的 价值 增值 。 男 外 ， 当 CDRs 
数据 与 用 户 当前 健康 状况 手机 实时 调研 数据 结合 起 来 ， 手 机 可 以 成 为 
一 个 强大 的 流行 病 预 警 系统 。 


一 般 移 动 性 和 交流 行为 是 一 个 人 的 思想 和 健康 状况 的 很 好 的 指 
标 ， 但 搜索 词 可 以 提供 额外 的 信息 : 它们 表明 了 某 人 关于 某 个 话题 的 
明确 兴趣 。 正 如 上 一 章 中 讨论 的 ， 合 歌 全 球 搜索 词 的 资料 库 可 以 提供 
一 段 时 间 内 搜索 词 之 间 的 定性 比较 ， 正 如 类 似 谷歌 趋势 之 类 的 工具 所 


展示 的 。 正 是 有 特定 的 应 用 目标 ， 比 如 监控 人 们 对 流感 的 关注 度 ， 搜 
索 词 才 可 以 成 为 公共 健康 领域 独特 而 强大 的 数据 库 。 合 歌 流感 妃 际 系 
统 是 一 个 使 用 现 有 大 数据 的 优秀 例子 ， 它 可 以 智能 分 析 搜 索 词 并 将 其 
与 现 有 的 流感 趋势 数据 库 配 对 ， 让 任何 人 都 可 以 近乎 实时 地 看 到 流感 
传播 状况 。 合 歌 的 研究 人 员 利 用 这 一 概念 并 将 其 扩展 应 用 到 登革热 
上 ,说 明了 它 在 追踪 季 市 性 流感 以 外 应 用 的 可 能 性 。 


和 谷歌 类 似 ， 脸 谱 网 和 推 特 拥 有 关于 人 们 的 意图 、 想 法 和 当前 状 
态 的 海量 数据 。 近 年 来 ， 特 别 是 推荐 ， 已 经 成 为 公共 健康 研究 人 员 的 
目标 之 一 。 人 研究 人 员 挖 掘 在 推 文中 表达 的 健康 观点 ， 并 开发 目 然 语言 
处 理 运 算法 则 来 消除 推 文 之 间 的 歧义 〈 比 如 ， 描 述 个 人 的 证 状 与 关于 
某 种 流行 病 更 广泛 传播 的 新 闻 ) 。 这 个 研究 的 早期 阶段 主要 关注 流感 
追踪 ,因为 之 前 就 有 的 数据 库 可 以 用 于 验证 它们 。 但 一 些 研 究 人 员 扩 
展 了 研究 范围 ， 开 始 检索 更 加 综合 的 个 人 健康 状况 措 述 ， 比 如 过 人 敏 、 
肥胖 以 及 其 他 病痛 等 。 


本 章 强调 了 全 球 数据 对 于 公共 健康 可 能 的 影响 ， 我 们 希望 可 以 在 
流行 病 肆 虞 之 前 识别 并 且 能 消除 它们 。 


航空 线路 数据 和 疫病 传播 


世界 各 国 长 期 以 来 都 在 记录 哪些 人 吊 了 哪些 疾病 。 国 家 数据 库 记 
了 永 这 些 数据 已 经 有 数 十 年 的 历史 了 ， 比 如 在 英格兰 和 威尔士 ， 从 1948 
年 开始 到 现在 都 有 关于 麻疹 传染 的 双 周 记录 数据 。 这 些 历 史 数 据 库 对 
于 数学 家 和 流行 病 学 家 来 说 很 有 吸引 力 ， 因 为 它们 可 以 用 于 创建 疾病 
传播 的 数学 模型 ， 利 用 数据 库 可 以 识别 疾病 的 起 源 并 量化 它 的 移动 。 
数学 家 将 这 些 可 以 描述 任意 一 种 在 某 个 系统 内 的 传播 模式 的 已 有 传播 
模型 ， 与 历史 数据 模式 相 比 较 。 通 过 校准 模型 中 的 参数 ， 他 们 试图 找 


到 一 个 可 以 复制 这 些 数 据 的 模型 ， 其 目的 是 找到 一 个 最 匹配 的 模型 以 
用 于 预测 未 来 疾病 的 传播 。 


这 些 模型 通常 包含 一 个 描述 人 口 流动 的 参数 ， 该 参数 是 确定 传染 
性 疾病 传播 方式 的 一 个 重要 因素 。 历 史上 曾经 通过 假设 人 们 随机 移动 
的 方式 来 预测 人 类 的 流动 性 ， 还 曾 通过 相当 粗略 的 调研 来 预 估 ， 即 询 
问 成 数 百 至 数 千 人 的 小 样本 人 群 在 过 去 一 周 、 一 个 月 或 一 年 中 他 们 都 
是 怎么 移动 的 。 但 这 种 类 型 的 调研 有 许多 先天 缺陷 ， 不 准确 (依靠 人 
们 错误 的 记忆 ) 、 样 本 偏 少 (每 次 只 能 调研 一 小 部 分 人 ) 且 时 效 性 有 
BR (传统 调研 并 不 是 持续 进行 的 ) 。 


然而 ， 在 21 世 纪 早 期 ,流行 病 学 家 和 数学 家 意识 到 ， 他 们 可 以 挖 
掘 出 能 够 更 能 代表 人 类 在 国家 内 或 区 域内 的 移动 性 的 数据 。 前 一 草 中 
讨论 过 的 航空 和 海运 线路 ， 都 可 以 用 于 了 解 人 们 和 货物 (两 者 都 可 能 
携带 疾病 载体 ) 在 全 世界 移动 的 情况 。 


航空 线路 提供 了 一 个 展示 城市 之 间 连 接 方 式 的 甬 入 式 网 络 。 使 用 
往来 机 场 的 人 流 数 据 ， 流 行 病 学 家 可 以 在 全 球 疾 病 传播 模型 中 增加 一 
个 信息 层 ， 这 在 简单 地 通过 稀少 的 数据 来 假设 人 口 移动 性 的 时 期 是 不 
可 能 的 。 


2006 年 ， 维 多 利 亚 ' 科 利 扎 和 她 的 同事 证 明了 ， 航 空运 输 网 络 在 严 
重 急 性 呼吸 综合 征 等 新 发 传染 性 疾病 的 全 球 传播 中 扮演 了 重要 角色 。 
研究 人 员 甚 至 提供 了 一 个 基于 航线 网 络 的 模型 ， 他 们 宣称 这 一 模型 可 
以 预测 狐 发 传染 疾病 的 短发 。 尽管 他 们 也 承认 ， 使 用 季节 变 化 以 及 区 
域 卫生 状况 和 卫生 设施 差异 等 其 他 要 素 ， 可 以 让 模型 更 精确 。 


但 并 非 所 有 的 航空 和 海运 线路 在 全 球 疾病 传播 中 都 有 相同 的 重要 
性 。 实 际 上 ， 在 描述 疾病 传播 的 过 程 中 ， 只 有 相当 小 的 一 部 分 城市 间 
的 航空 线路 会 被 使 用 到 。 格 奥 尔 基 . 波 巴 谢 夫 、 罗 伯 特 :J 英里 斯 和 DD 到 


5 SUA, 7E3 000 个 城市 中 选取 200~300 个 之 间 的 样本 ， 束 可 
以 获得 关于 疾病 传播 的 足够 信息 。 


对 有 些 全 球 性 的 疾病 来 说 ， 如 通过 蚊子 或 其 他 害虫 传播 的 疾病 ， 
可 以 在 航空 乘客 路 线 之 外 加 入 全 球 海运 路 线 来 衡量 移动 性 从 而 更 好 地 
建 模 ， 因 为 大 型 货船 运输 的 货物 很 容易 成 为 昆虫 搭乘 的 便 车 。 比 如 ， 
拭 疾 征 通 过 不 同 种 类 的 星子 传播 ， 闪 比 亚 按 败 是 传染 无 疾 的 一 种 主要 
物种 ，20 世 纪 30 年 代 它 们 从 非洲 传 到 巴西 就 是 一 个 典型 的 主要 通过 海 
运 路 线 传播 的 案例 。 近 年来， 海运 集 钱 箱 把 亚洲 虎 蚊 ， 又 叫 日 纹 伊 蚊 
引进 到 了 狐 的 区 域 ， 这 种 蚊子 是 登 早 热 、 黄 热 病 和 西 尼 罗 热 的 重要 载 
体 。 更 好 地 了 解 蚁 子 或 者 其 他 通过 海洋 运输 的 疾病 载体 在 全球 的 移 
动 ， 可 以 帮助 港口 城市 采取 预防 措施 来 防范 害虫 传播 的 疾病 。 


疾病 预测 


尽管 航空 和 海 详 数据 可 以 改善 模型 ， 最 有 效 的 调整 这 些 模型 的 方 
法 还 是 关注 人 类 的 移动 行为 本 号 ， 而 不 仅仅 是 这 些 数据 表现 。 关 于 人 
们 如 何 移动 的 精细 信息 ， 可 以 通过 CDRs 数 据 来 采集 ( 像 第 七 章 中 提 到 
的 那样 ) 。 从 CDRs 数 据 中 获得 的 移动 性 信息 可 以 反馈 到 流行 病 学 模型 
中 ， 以 更 准确 地 了 解 移动 情况 ， 因 为 在 全 球 模型 中 不 同 区 域 的 移动 情 
况 征 有 差异 的 。 


根据 GSMA 无 线 情 报 机 构 的 研究 ， 到 2012 年 年 来 全 球 有 32 亿 人 每 
人 拥有 至 少 一 部 手机 ， 而 到 2017 年 这 一 数据 将 会 达到 40 亿 (然而 ， 这 
些 数据 仍然 远 远 少 于 真实 的 活跃 手机 数量 ， 因 为 有 些 人 有 不 止 一 部 手 
机 ，2012 年 年 末 的 活跃 手机 数量 大 约 是 60 亿 部 ) 。 这 些 活 跃 的 手机 产 
生 了 拍 字 节 级 别 的 数据 ， 在 全 球 每 个 国家 高 效 地 留 下 了 人 们 的 位 置 和 
交流 的 数字 踪迹 ， 而 且 这 些 数据 可 以 近乎 实时 地 被 获取 到 。 


CDRs 的 历史 数据 对 人 类 的 流动 性 提供 了 实证 的 、 精 细 的 观察 ， 可 
以 用 于 改善 模型 ， 融 像 航空 和 海运 数据 一 样 。CDRs 数 据 包 含 了 移动 状 
况 的 季 下 性 差异 和 区 域 性 差异 。 尽 管 多 数 流 行 病 模型 假设 了 更 加 静态 
和 粗放 的 条 件 ， 但 采用 了 CDRs 数 据 的 模型 可 以 更 容易 适应 不 同 的 时 间 
和 区 域 。 


但 重要 的 是 ，CDRs 数 据 本 号 也 可 以 作为 疾病 又 发 的 一 种 新 的 指 
标 ， 一 个 可 以 实时 更 新 的 指标 。 为 了 证 明 这 一 观点 ， 马 多- 利 普 斯 奇 和 
他 的 同事 在 2010 年 甲 型 HIN1 流 感 舌 发 时 期 ， 在 墨西哥 部 著 了 一 个 面 问 
100 万 手机 用 户 的 移动 平台 。 与 第 九 草 中 提 到 的 Jana 公 司 案例 类 似 ， 该 
平台 让 用 户 参与 天 于 他 们 当前 健康 状况 的 调研 以 换取 一 定量 的 通话 时 
间 。 当 调研 结果 和 通过 CDRs 数 据 获 取 的 个 动 信息 结合 在 一 起 的 时 候 ， 
可 以 发 现 手机 用 户 的 移动 和 交流 模式 的 变化 与 疾病 的 又 发 呈现 可 能 的 
由 天性” 


传统 的 流感 区 域 预警 系统 最 少 也 有 几 天 力 至 儿 周 的 延迟 ， 因 为 有 
证 状 的 人 不 会 马上 去 看 医生 ， 当 地 政府 和 医院 也 不 会 马上 把 诊断 案例 
更 新 到 数据 库 中 。 一 个 能 够 目 动 挖 掘 实时 CDRs 数 据 和 手机 调研 数据 的 
工具 ， 可 以 改革 传染 性 疾病 监测 机 制 ， 这 对 于 发 达 和 发 展 中 国家 来 说 
都 可 以 实现 。 


新 的 监测 机 制 的 实施 并 不 需要 人 花费 太 多 。 流 行 病 学 家 和 政府 部 门 
可 以 直接 利用 现 有 的 手机 基础 设施 及 其 采集 的 数据 ， 建 立 一 个 真正 的 
预警 系统 ， 而 不 需要 去 更 新 、 修 改 或 是 扩展 现 有 的 疾病 报告 系统 。 他 
们 还 可 以 挖掘 其 他 数据 来 源 ， 比 如 橙 守 销量 或 者 火车 站 所 提 摄 到 的 乘 
客 咳 嗽 的 监控 视频 。 这 一 迅速 发 展 的 领域 被 称 为 “症状 监测 *”， 其 本 质 
征 通 过 一 系列 分 散 的 多 样 数据 来 源 ， 在 早期 阶段 发 现 集 缀 的 疾病 证 
状 。 政 策 制 定 者 通过 使 用 这 些 数 据 的 系统 可 以 建议 可 行 的 早期 行动 ， 
比如 关闭 中 学 和 大 学 ， 及 时 避 开 疾病 可 能 市 来 的 挛 重 影响 。 
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论文 由 谷歌 的 研究 人 员 所 写 ， 展 示 了 如 何 利用 数 百 万 人 的 网 页 搜索 数 
据 ， 来 推测 一 天 中 流行 性 感冒 在 美国 的 不 同 区 域 的 活跃 度 。 它 说 明 谷 
歌 的 搜索 词 条 数据 库 除 了 用 于 呈现 受 欢 迎 的 网 页 或 有 关 的 广告 之 外 ， 
还 可 以 发 挥 更 大 的 作用 。 谷 歌 找到 了 利用 用 户 的 兴趣 来 推断 他 们 的 健 
康 状况 的 高 效 方法 ， 并 将 该 方法 运用 到 了 设计 谷歌 流感 追踪 系统 这 一 
免费 工具 。 


谷歌 流感 追踪 系统 是 在 数 千 亿 条 美国 搜索 数据 的 基础 上 开发 出 来 
的 ， 包 括 2003~2008 年 这 5 年 时 间 的 匿名 合 歌 网 页 搜索 记录 。 但 为 了 找 
到 与 追踪 流感 周期 关系 最 密切 的 搜索 词 ， 人 研究 人 员 人 研究 了 美国 疾病 控 
制 与 预防 中 心 的 流感 预防 定点 监控 网 络 的 公共 数据 。 他 们 基于 美国 疾 
病 控制 与 预防 中 心 的 公共 数据 建立 了 一 个 流感 活跃 度 模 型 ， 然 后 和 他 
们 未 经 过 滤 的 5 000 万 条 最 常用 的 搜索 词 条 数据 库 对 比 。 美 国 疾病 控制 
与 预防 中 心 模型 和 搜索 词 条 数据 库 之 间 的 对 比 显 示 ， 在 频率 和 时 间 方 
面 而 言 ， 特 定 的 搜索 词 条 出 现 的 高 峰 和 美国 疾病 控制 与 预防 中 心 数据 
显示 的 流感 活跃 性 的 增强 相 一 致 。 通 过 对 比 ， 人 研究 人 员 获 得 了 与 美国 
疾病 控制 与 预防 中 心 模型 中 每 年 流感 活跃 性 相符 的 45 个 搜索 词 条 ， 并 
将 这 些 词 条 归 入 流感 并 发 症 、 感 冒 /流感 药品 、 常 见 流感 症状 以 及 其 他 
与 流感 相关 的 大 类 中 。 


这 个 验证 搜索 词 与 流感 活 距 性 相关 的 方法 ， 被 重复 用 于 至 少 28 个 
国家 以 及 美国 的 全 部 50 个 州 。 不 同 国家 流感 活跃 性 的 实证 数据 库 可 以 
在 谷歌 .org 网 站 上 碍 看。 此外， 流感 追踪 数据 可 以 生成 随时 间 变 化 的 
活跃 度 图 表 ， 也 可 以 以 文本 文件 格式 下 载 。 


在 一 个 称 为 登革热 追踪 系统 (Dengue Tracker) 的 工具 中 ， 合 歌 把 
确定 流感 活跃 度 的 方法 扩展 到 了 登革热 的 研究 上 ， 并 在 包括 玻 利 维 


亚 、 巴 西 、 印 度 、 印 度 尼 西亚 和 新 加 坡 在 内 的 至 少 十 个 国家 应 用 。 
2011 年 的 一 篇 论文 中 介绍 了 人 研究 人 员 开 发 该 工具 的 方法 ， 并 提 到 这 个 
工具 可 能 具备 特别 大 的 用 途 ， 因 为 登 捍 热 暴 发 的 国家 大 多 缺乏 传统 疾 
病 监 控 资 源 。 


但 它 的 算法 并 不 是 完美 的 ， 而 是 其 他 大 数据 模型 一 样 ， 仅 仅 基于 
搜索 词 的 模型 需要 核查 。 谷 歌 的 数据 认为 2013 年 1 月 在 流感 季 骏 发 的 时 
候 有 11% 的 人 口感 染 了 流感 ， 但 这 一 预测 数据 几乎 是 美国 疾病 控制 与 
预防 中 心 所 监测 到 的 6% 的 两 售 。 一 些 研 究 人 员 猜 想 ， 这 个 差异 可 以 用 
流感 季 大 量 的 新 闻 报 道 引 发 了 社交 媒体 上 的 大 讨论 来 解释 ， 但 究竟 是 
什么 因素 仍然 不 清楚 。 这 表明 了 对 于 模型 来 说 ， 如 果 采 用 了 一 定量 的 
搜索 信息 ， 那 么 最 好 也 能 包含 一 些 实 证 数据 的 现实 核查 ， 我 们 将 在 下 
一 节 中 继续 讨论 这 一 点 。 


流行 病 网 络 


推 竺 和 脸谱 网 可 能 是 世界 上 拥有 最 明确 、 最 详细 的 个 人 信息 的 两 
个 在 线 服 务 商 。 人 们 所 公开 的 关于 目 己 的 信息 总 量 征 令 人 难以 置信 
的 ， 从 工作 、 人 位置、 政治 立场 力 至 状态 更 新 中 透露 的 个 人 观点 无 所 不 
有 “。 迄 今 为止 ， 很 少 有 人 研究 人 员 可 以 从 脸谱 网 数据 中 挖掘 全 球 公 共 健 
康 的 线索 。 相 反 ， 近 年 来 很 多 人 研究 人 员 已 经 开始 利用 相对 比较 好 获取 
的 推 特 数据 。 他 们 的 初期 成 末 展 示 了 利用 社交 数据 建立 绿 合 可 靠 的 公 
共 卫 生 系 统 的 光明 未 来 。 


2010 年 ， 瓦 西里 欧 斯 :三 波斯 和 内 罗 : 克 里 斯 带 安 尼 尼 扩展 了 谷歌 研 
究 人 员 的 工作 ， 他 们 通过 挖掘 英国 550 万 活跃 推荐 用 户 每 天 发 布 的 数 十 
万 条 推 文 ， 来 寻找 流感 的 相关 指标 。 和 谷歌 研究 人 员 用 来 寻找 与 区 域 
内 流感 发 生 率 相关 的 搜索 词 的 方法 相似 ， 兰 波斯 和 元 里 斯 带 安 尼 尼 比 
较 了 2009 年 6~12 月 间 英 国 已 有 的 流感 相关 数据 。 人 研究 人 员 发 现 ， 特 定 
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方法 的 一 个 独立 验证 ， 并 且 提 供 了 改善 单一 使 用 搜索 词 的 可 能 。 尽 管 
在 线 搜索 和 推 文 都 可 能 会 被 媒体 的 大 肆 宜 扬 和 讨论 所 影响 ， 但 人 们 在 
推 等 环境 下 可 能 会 提供 更 明确 的 育 景 信息 ， 比 如 发 表 类 似 “ 我 感冒 
了 ”的 推 文 。 如 有 果 目 动 系统 检测 到 这 类 推 文 ， 束 可 以 用 于 推测 该 情形 在 
普通 人 群 中 的 规模 ， 这 与 第 九 草 中 提 到 的 手机 调研 的 方法 类 似 。 


其 他 研究 人 员 ， 包 括 欧 牧 英 治 和 他 的 同事 ， 以 及 邓 西 刀 ' 周 还 有 巩 
特 尔 . 埃 森 巴赫 ， 也 用 不 同 的 方法 分 析 了 推 文 。 充 牧 开 发 了 目 然 语言 过 
滤 右 来 区 分 有 关 流 感 的 讨论 和 表明 一 个 人 生病 的 推 文 。 周 和 埃 森 巴赫 
关注 了 三 种 方法 : 监控 诸如 HIN1 这 样 的 术语 词汇 ， 使 用 内 容 分 析 来 确 
定 推 文 的 含义 《比如 判断 是 分 至 新 闻 还 是 自我 诊断 ， ，， 以 及 验证 推 符 
作为 实时 奶 踩 工具 的 效果 。 


男 一 些 研 究 人 员 将 推 特 看 作 一 个 全 球 层面 更 综合 的 公共 健康 数据 
来 源 。 迈 元 尔 本 保罗 和 马克 ' 德 雷 泽 开发 了 一 个 主题 模型 ， 是 特别 为 寻 
找 描 述 钙 状 和 不 同 常见 疾病 的 褒 疗 方法 的 词汇 而 设计 的 。 篆 见 疾病 话 
题 模 型 通过 对 包含 疾病 讨论 的 160 万 条 推广 进行 学 习 ， 已 经 可 以 提取 从 
流感 、 传 染病 到 受伤 、 政 次 问题 、 一 般 疼 痛 等 状况 的 信息 。 人 研究 人 员 
宣称 ， 该 模型 与 谷歌 妃 踩 系统 的 早期 追 踩 结 采 以 及 其 他 建立 在 政府 健 
康 数 据 库 基础 上 的 推 适 模型 相符 。 


推 竺 数据 挖掘 展示 了 一 种 采集 公共 健康 观点 的 可 能 的 新 方法 ， 从 
某 种 意义 来 说 ， 束 是 监听 公众 对 于 健康 的 讨论 ， 而 不 是 直接 询问 人 们 
的 看 法 。 尽 管 如 此 ， 在 一 个 社会 健康 监控 系统 完善 之 前 ， 还 需要 做 很 
多 工作 来 验证 来 目 大 家 的 观点 ， 也 许 需要 跟 手 机 调研 结合 起 来 。 


作为 一 个 全 球 社区 ， 我 们 处 在 公共 健康 新 时 代 的 突破 点 上 。 长 久 
以 来 ， 人 类 都 受到 传染 性 疾病 的 困扰 ， 但 随 着 医学 的 发 展 以 及 科学 家 
对 疾病 原因 的 研究 进展 ， 很 多 生命 得 到 拯救 ， 人 类 承受 的 病痛 也 被 缓 


解 。 然 而 ， 尽 管 现代 科学 家 开始 了 解 疾病 的 来 产 ， 但 他 们 并 不 能 一 直 
清楚 地 掌握 疾病 在 人 群 中 的 传播 途径 ， 也 不 能 肯定 地 预测 疾病 传播 的 
精确 路 径 。 


如 今 ， 科 学 家 终于 看 到 了 终极 的 预防 性 工具 到 来 的 里 光 一 一 大 数 
据 。 大 数据 和 现实 挖掘 有 可 能 可 以 创造 一 个 实时 “水 部 球 ”， 可 以 及 时 
将 新 型 流感 病毒 或 者 霍乱 发 病 率 的 突然 上 升 这 类 紧急 疾病 动态 信息 ， 
及 时 通知 医疗 服务 人 员 、 公 共 政 策 制定 者 和 其 他 人 。 


第 五 部 分 重点 提 到 了 一 些 可 以 为 这 个 “水 蝇 球 ” 添 砖 加 瓦 的 数据 来 
源 ， 从 出 行 网 络 和 搜索 引擎 检索 词 到 手机 调研 和 动态 推 文 ， 同 时 还 着 
重 介绍 了 一 些 使 用 这 些 数 据 的 项 目 。 随 着 时 间 的 推移 ， 和 急性 流行 病 的 
最 佳 预警 系统 可 能 会 是 建立 在 许多 数据 来 源 的 组 合 上 的 ， 并 且 这 些 数 
据 可 以 回溯 到 个 人 以 进行 现实 核查 (通过 移动 设备 调研 或 通过 能 核实 
的 推 文 ) 。 同 时 ， 我 们 还 需要 更 多 的 工作 ， 来 找到 通过 社交 网 络 、 搜 
索 词 条 以 及 手机 数据 推断 关于 慢性 疾病 的 最 佳 方 法 。 我 们 也 需要 更 好 
地 了 解 我 们 的 数据 怎样 才能 和 慢性 疾病 联系 起 来 ， 比 如 糖尿 病 、 免 疫 
系统 北 乱 以 及 心脏 疾病 。 正 如 流感 数据 在 谷歌 工程 师 的 眼皮 下 被 埋 减 
了 将 近 十 年 的 时 间 ， 慢 性 疾病 的 相关 数据 也 可 能 束 近 在 眼前 ， 它 们 只 
是 需要 从 噪声 里 被 径 选 出 来 。 


1 

在 本 书 的 写作 过 程 中 ， 我 们 决定 尽 可 能 多 地 关注 那些 进行 现实 控 
掘 的 初创 企业 或 知名 公司 。 尽 管 也 有 很 多 有 趣 的 学 术 论 文 ， 但 是 它们 
往往 关注 一 些 短期 研究 项 目 ， 这 些 项 目 不 一 定 能 生产 有 深远 影响 的 计 
划 ， 或 是 只 能 生产 难以 验证 的 一 次 性 成 果 。 当 然 ， 这 些 公司 可 能 会 县 
花 一 现 、 被 兼并 或 是 消失 ， 但 我 们 相信 ， 分 享 已 有 的 这 些 现实 挖掘 案 
例 ， 可 以 更 好 地 在 实践 领域 夯实 大 数据 应 用 的 基础 。 


也 就 十 说 ， 我 们 在 编辑 过 程 中 ， 逐 渐 删 掉 了 本 书 初稿 中 提 到 的 一 
些 公 司 ， 因 为 它们 已 经 不 存在 了 。 并 且 ， 在 本 书 付 样 出 版 的 有 时候， 还 
会 有 一 些 公司 可 能 在 霖 来 3~5 年 中 消失 。 大 数据 的 世界 在 飞快 地 运转 ， 
而 这 些 日 新 月 异 的 初创 企业 正 是 这 一 速度 的 明证 。 


但 是 ， 我 们 也 认为 学 术 论 文 在 大 数据 领域 占有 重要 的 一 席 之 地 。 
毕竟 “现实 挖掘” 这 一 术语 束 是 在 麻 省 理工 学 院 的 一 篇 研究 论文 中 首先 
提出 的 。 本 书 中 引用 的 论文 只 是 探索 了 大 数据 应 用 的 一 些 基 本 的 可 能 
性 。 而 真实 的 情况 是 ， 为 了 实现 海量 数据 的 全 部 潜力 ， 并 给 人 类 系统 
提供 周到 而 续 密 的 应 用 程序 ， 软 件 工程 师 们 需要 面 对 和 处 理 的 数据 量 
十 分 巨大 ， 无 论 是 范围 层面 还 是 时 间 规 模 ， 都 是 学 术 研 究 中 几乎 不 太 
可 能 实现 的 。 


此 外 ， 作 为 一 本 大 数据 挖掘 指南 ， 本 书 的 核心 是 号 各 所 有 人 行动 
起 来 。 如 有 果 你 是 企 业 家 ， 请 想 想 通过 现实 挖掘 可 以 为 你 、 你 的 邻 届 和 
世界 提供 些 什 么 ， 如 末 你 喘 处 政府 部 | ]， 请 思考 如 何 利 用 数据 来 制定 
更 好 的 政策 ， 如 果 你 是 科研 工作 者 ， 可 以 考虑 如 何 将 研究 项 目 推广 到 
更 加 广泛 和 长 期 的 应 用 领域 。 而 在 所 有 这 些 行动 中 ， 都 应 注重 隐私 问 
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的 初始 阶段 融 应 该 考虑 隐私 问题 ， 数 据 的 采集 和 使 用 过 程 也 应 该 保持 
透明 。 


现实 挖掘 可 以 从 那些 失效 的 系统 开始 着 手 ， 如 慢性 疾病 管理 寓 
L、 社 区 又 败 、 组 织 见 余 、 公 路 堵塞 、 经 济 桶 退 以 及 全 球 性 传染 病 
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接 下 来 ， 考 虑 与 这 些 系统 失效 有 关 的 或 可 以 作为 指标 的 数据 类 
型 : 生理 行为 的 变化 、 街 头 涂鸦 的 增多 、 生 产 效 率 的 下 降 、 汽 车 移动 
速度 变 慢 、 购 物 习 惯 的 转变 、 人 们 的 旅行 模式 等 。 本 书 提供 了 多 个 相 
天 数据 集 的 一 些 指标 ， 但 必须 承认 样本 有 限 。 数 据 无 处 不 在 ， 使 用 它 
们 只 是 接触 数据 的 一 种 方式 而 已 。 


还 需要 考虑 在 不 同 层面 采集 数据 一 个 人 、 社 区 和 组 织 、 城 市 、 
国家 以 及 全 球 层面 。 这 些 层面 上 分 别 有 什 么 样 的 隐私 性 问题 需要 考 
虑 ? 有 些 什 么 样 的 数据 分 享 激励 措施 ?透明 度 在 何 时 何 处 最 能 发 挥 作 
用 ? 哪些 人 可 以 从 你 的 数据 中 获 益 ? 为 什么 ? 


最 后 ， 除 了 从 数据 中 获取 信息 外 ， 人 们 还 应 思考 如 何 通 过 数据 让 
城市 系统 运行 得 更 好 更 智 态 。 如 何 设计 一 个 帮助 糖尿 病 病 人 更 好 地 监 
测 目 身 状况 的 手机 应 用 ? 如 何 帮 助 市 民 参 与 振兴 有 惨败 的 社区 ? 如 何 让 
脑力 劳动 者 更 方便 地 分 享 信息 ? Se AORN Me, CPE TAMAS 
通 并 将 预计 的 路 程 时 间 和 备 选 路 线 等 信息 发 送 给 芝 驶 者 ”如 何 根据 消 
费 者 的 特定 消费 模式 预见 到 国家 的 经 济 衰退 ? 如 何 帮 助 政府 更 高 效 地 
配置 经 济 激励 资金 ? 如 何 根据 人 员 移 动 抑制 下 一 轮 大 规模 流行 病 的 又 
发 ? 


然而 ， 如 果 认 为 我 们 持续 产生 的 这 些 大 数据 只 会 被 用 于 推动 世界 
进步 ， 那 束 太 天 真 了 。 近 期 的 一 些 事件 显 示 ， 政 府 在 获取 大 数据 时 有 
可 能 会 滥用 这 些 数据 ， 监视 居 民 、 和 镇 压 不 同 政见 者 或 是 妨害 公民 目 


由 。 此 外 ， 公 司 和 营销 者 布 望 通过 确定 消费 者 的 行为 来 获取 更 大 利 
润 ， 或 是 推送 更 有 和 针对 性 的 广告 ， 或 是 影响 消费 行为 ， 这 对 绝 大 多 数 
人 来 说 也 不 会 是 进步 。 关 于 这 些 大 数据 使 用 不 当 的 麻烦 后 采 ， 我 们 留 
待 其 他 地 方 再 做 深入 讨论 。 


但 是 ， 如 琳 因 为 大 数据 可 能 被 用 于 不 道德 应 用 束 集 止 数 据 采 集 ， 
那 也 是 幼稚 的 。 这 就 是 为 什么 我 们 给 工程 师 、 企 业 家 、 学 者 和 政策 制 
定 着 提供 了 另 一 条 路 径 : 利用 数据 来 推动 积极 的 变化 ， 并 在 使 用 数据 
的 整个 过 程 中 立足 现状 并 考虑 处 理 个 人 数据 时 的 道德 约束 。 


我 们 希望 本 书 对 大 数据 的 积极 次 力 进行 了 基本 曾 述 ， 也 希望 通过 


此 书 让 大 家 了 数据 挖掘 方法 的 应 用 、 系 统 和 概念 。 大 数据 的 时 代 束 在 
眼前， 让 我 们 一 起 来 建造 一 个 更 美好 的 世界 吧 ! 


